zzzz-腾讯云开发者社区

开发者社区

文档建议反馈控制台

腾讯云架构师技术同盟

文章/答案/技术大牛

发布

zzzz

专栏成员

17

文章

20536

阅读量

15

订阅数

什么是大数据

大数据 mapreduce 开源数据处理 hadoop

进入本世纪以来，尤其是2010年之后，随着互联网特别是移动互联网的发展，数据的增长呈爆炸趋势，已经很难估计全世界的电子设备中存储的数据到底有多少，描述数据系统的数据量的计量单位从MB（1MB大约等于一百万字节）、GB（1024MB）、TB（1024GB），一直向上攀升，目前，PB（等于1024TB）级的数据系统已经很常见，随着移动个人数据、社交网站、科学计算、证券交易、网站日志、传感器网络数据量的不断加大，国内拥有的总数据量早已超出 ZB（1ZB=1024EB，1EB=1024PB）级别。

2018-11-12

1.1K0

大数据框架hadoop服务角色介绍

hadoop TDSQL MySQL 版 hbase java 大数据

翻了一下最近一段时间写的分享，DKHadoop发行版本下载、安装、运行环境部署等相关内容几乎都已经写了一遍了。虽然有的地方可能写的不是很详细，个人理解水平有限还请见谅吧！我记得在写DKHadoop运行环境部署的时候，遗漏了hadoop服务角色的内容，本篇特地补上这部分内容吧，不然总觉得不舒服。

2018-11-12

1K0

hanlp中文自然语言处理分词方法说明

NLP 服务大数据 hadoop

自然语言处理在大数据以及近年来大火的人工智能方面都有着非同寻常的意义。那么，什么是自然语言处理呢？在没有接触到大数据这方面的时候，也只是以前在学习计算机方面知识时听说过自然语言处理。书本上对于自然语言处理的定义或者是描述太多专业化。换一个通俗的说法，自然语言处理就是把我们人类的语言通过一些方式或者技术翻译成机器可以读懂的语言。

2018-10-10

2.1K0

GitHub十周岁HanLP自然语言处理包用户量超越CoreNLP

深度学习神经网络人工智能 github NLP 服务

在本周，GitHub终于度过了属于它自己的十周岁生日。这个在2008年由3个来自旧金山的年轻人创建的基于Git的代码托管网站，先后超越了元老级的SourceForge和背景强大的Google Code，成为了全世界范围内最受欢迎的代码托管网站。

2018-10-10

6850

工业大数据分析平台的应用价值探讨

大数据数据分析大数据解决方案企业

大数据经过多年的潜心发展，在当今可以说是进入到了一个快速发展期。各种围绕大数据的应用开发也迅速火热起来了。政务大数据解决方案、企业级大数据解决方案、智慧城市停车大数据解决方案等已经开始被应用。5月份一条很有意思的娱乐新闻——警方在某歌手的演唱会上抓捕了好几个被网上追逃的人。这同样是大数据技术的应用······

2018-10-09

8190

免费大数据平台有哪些？

昨天（5月28号）由社科文献出版社初版的《大数据蓝皮书：中国大数据发展报告No.2》正式发布了。以“数化万物智在融合”为主题的中国国际大数据产业博览会也京举行中。基本可以预见，在接下来的一段时期内关于大数据应用开发又将进入到一个新的阶段。

2018-10-09

6.2K0

大快城市智慧停车系统方案的架构体系

最近几年随着大数据技术快速发展与应用，智慧城市随即被正式提出。而且，我们也可以深刻感受到“智慧”正在慢慢改变我们的生活方式和城市。要让城市变智慧的地方太多太多，当前我们接触做多的可能就是外出停车，比如很多商场的停车系统，很多商城的停车场都实现了无人值守。这就是得益于智慧城市停车云平台。

2018-10-09

1K0

hadoop大数据处理平台与案例

大数据数据处理数据安全 hadoop

大数据能够在国内得到快速发展，甚至是国家层面的支持，最为重要的一点就是我们纯国产大数据处理技术的突破以及跨越式发展。在互联网深刻改变我们的生活、工作方式的当下，数据就成为了最为重要的资料。尤其是数据安全问题就更为突出，前阶段的Facebook用户数据泄漏所引发产生的一系列问题，就充分的说明了数据安全问题的严重性。大数据发展的必然趋势就是将会深刻改变我们的工作和生活方式，无论是企业还是个人也都必然会成为其中的一个“数据”。选择什么样的大数据处理，不仅仅考虑是简单、易用，更重要的是能够确保数据的安全！

2018-10-09

1.2K0

大快HanLP自然语言处理技术介绍

NLP 服务大数据数据结构

这段时间一直在接触学习hadoop方面的知识，所以说对自然语言处理技术也是做了一些了解。网络上关于自然语言处理技术的分享文章很多，今天就给大家分享一下HanLP方面的内容。

2018-10-09

6210

hadoop大数据平台架构之DKhadoop详解

大数据开源 sql hadoop 面向对象编程

大数据的时代已经来了，信息的爆炸式增长使得越来越多的行业面临这大量数据需要存储和分析的挑战。Hadoop作为一个开源的分布式并行处理平台，以其高拓展、高效率、高可靠等优点越来越受到欢迎。这同时也带动了hadoop商业版的发行。这里就通过大快DKhadoop为大家详细介绍一下hadoop大数据平台架构内容。

2018-10-09

1.2K0

DKH企业级大数据解决方案的优势介绍

云计算运维大数据解决方案大数据数据可视化

大数据技术的发展与应用已经在深刻地改变和影响我们的日常生活与工作，可以预见的是在大数据提升为国家战略层面后，未来的几年里大数据技术将会被更多的行业应用。

2018-09-26

4640

DKhadoop大数据平台基础框架的简单介绍

大数据开源 hadoop 搜索引擎

大数据作为当下最为热门的事件之一，其实已经不算是很新鲜的事情了。如果是三五年前在讨论大数据，那可能会给人一种很新鲜的感觉。大数据作为当下最为重要的一项战略资源，已经是越来越得到国家和企业的高度重视，我们从大数据被上升到国家战略层面就可窥见一二！

2018-09-26

6260

hadoop框架结构学习详述

面向对象编程数据处理 nosql sql spark

近年，随着互联网的发展特别是移动互联网的发展，数据的增长呈现出一种爆炸式的成长势头。单是谷歌的爬虫程序每天下载的网页超过1亿个（2000年数据，）数据的爆炸式增长直接推动了海量数据处理技术的发展。谷歌公司提出的大表、分布式文件系统和分布式计算的三大技术构架，解决了海量数据处理的问题。谷歌公司随即将设计思路开源，发表了具有划时代意义的三篇论文，很快根据谷歌设计思路的开源框架就出现了，就是如今非常火爆的hadoop、Maperduce和许多Nosql系统。这三大技术也是整个大数据技术的核心基础。

2018-09-26

4810

学hadoop需要什么基础

hadoop linux 分布式

最近一段时间一直在接触关于hadoop方面的内容，从刚接触时的一片空白，到现在也能够说清楚一些问题。这中间到底经历过什么只怕也就是只有经过的人才会体会到吧。前几天看到有个人问“学hadoop需要什么基础”，这个问题好像至今还没好好细想过，可能是因为身边有大神在带着我学习hadoop的缘故，也就没想过这样的一个简单的问题。

2018-09-26

8440

大快DKhadoop助力实施国家大数据战略规划

大数据 hadoop 数据安全大数据解决方案

如若要问当下的互联网行业什么最火，莫过于大数据、区块链。2017年12月8日，习大大的主持召开的政治局第二次集体学习会议时强调推动实施国家大数据战略，加快完善数字基础设施、推进数据资源整合和开放共享，保障数据安全，加快建设数字中国。至此，传递出的一个重要信息——大数据已经上升为国家战略！

2018-10-10

4810

大快大数据开发框架的构成模块

大数据 spark hadoop 数据安全

大数据也不是近几年才出现的新东西，只是最近几年才真正意义上变得热门、火爆！而这要得益于互联网信息技术的快速发展，网络改变世界、改变生活，大数据技术的应用让这样的改变更为深刻。

2018-10-10

7160

政务大数据解决方案之大快DKhadoop

大数据解决方案大数据数据处理数据分析政务云专区

从事大数据行业的朋友应该都知道大数据已经上升到了国家战略高度，2015年8月31日，国务院印发了《促进大数据发展行动纲要》。旨在通过建立“用数据说话、用数据决策、用数据管理、用数据创新”的管理机制，实现基于数据的科学决策。

2018-10-10

9030

没有更多了

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态