腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
有没有集成beanstalkd和
hadoop
的好方法?
、
、
、
只要数据增长,我就需要选择
Hadoop
来
分析
数据,以便使用Hive实现BI目的。将beanstalkd与
hadoop
集成的最佳
实践
是什么?我找到了FlumeNG,但它似乎太重了,无法满足我的需求。
浏览 3
提问于2014-06-04
得票数 2
2
回答
hadoop
如何帮助用户跟踪数据?
、
、
我想知道
hadoop
如何帮助用户数据跟踪。例如,我有一个电子商务应用程序,我希望记录客户执行的每一个活动,例如查看项、添加到购物车或购买项目。是否有使用
hadoop
记录事件的示例或最佳
实践
。我之所以想使用
hadoop
,是因为它的高可用性和可伸缩性,而且记录的数据也将从GBs增长到TBs。还是我错了?因为日志记录应该独立于
hadoop
,以后对日志数据的
分析
可以用
hadoop
完成吗?
Hadoop
仅仅是关于MapReduce的吗?如果我可以使用
had
浏览 3
提问于2014-04-11
得票数 1
回答已采纳
2
回答
查询和转储生产数据库
、
我有一些大型MySQL生产表需要转储,以便可以在
Hadoop
中运行一些
分析
。关于对生产数据库进行转储和查询,我应该了解哪些最佳
实践
?如果我只是进行转储/读取(而不是写入),我需要担心影响生产性能吗?
浏览 2
提问于2010-06-20
得票数 0
回答已采纳
4
回答
Hadoop
批处理
分析
和
hadoop
实时
分析
有什么区别?
、
我想知道
Hadoop
批处理
分析
和
Hadoop
实时
分析
的区别。例如,
Hadoop
real time analytics可以使用Apache Spark完成,而
Hadoop
batch analytics可以使用Map reduce编程。另外,如果实时
分析
是更好的
分析
方法,那么批量
分析
需要什么? 谢谢
浏览 5
提问于2016-02-11
得票数 1
1
回答
最佳
实践
:如何通过更改"schema“/”column“来处理数据记录
、
、
、
、
这是一个最佳
实践
问题。然而,我们面临的问题是,我们想要
分析
的日志记录最终会发生变化,从这个意义上讲,可能会添加或删除列。我想知道你们中的一些人是否愿意分享你们在这种情况下的最佳
实践
。目前我们能想到的最好的方法是将数据存储为json格式,而不是csv格式。但是,这将增加(至少两倍)所需的存储空间。
浏览 1
提问于2015-04-28
得票数 1
1
回答
近实时
分析
仪表板的最佳
实践
、
、
、
、
目前,我正在构建一个仪表板,以查看有关我公司产品生成的数据的一些
分析
。我们使用MySQL作为数据库。从原始实时数据生成
分析
的SQL查询可能有点复杂,需要很长时间处理。因此,我安排了一些批次,每天或每小时运行,查询这些实时数据并生成
分析
,并将其存储在一些仅由仪表板查询的特殊表中。它运行良好,但缺点是
分析
不是实时的。 因此,我想知道什么是我的要求的最佳
实践
。我想知道将实时数据从MySQL复制到诸如
hadoop
或Elasticsearch之类的东西是否是一个好的解决方案。
浏览 0
提问于2016-02-04
得票数 4
1
回答
用于存储/访问大量数据的PostgreSQL和S3QL
、
、
我们目前在亚马逊的EC2上使用postgres9,对其性能非常满意。现在我们正在考虑向Postgres添加~2TB的数据,这超出了我们的EC2小实例所能容纳的范围。
浏览 4
提问于2011-12-15
得票数 4
回答已采纳
1
回答
HDP集群如何定义磁盘分区?
、
、
在安装HDP集群时,我尝试使用Hortonworks的最佳
实践
,通过以下步骤定义磁盘分区: 我正在使用Ambari 2.0来安装我的堆栈。
Hadoop
的默认安装路径是/
hadoop
/xxx。有没有办法告诉Ambari使用上面链接中的最佳
实践
,而不是/
hadoop
?如果不是,那么手动操作的最好方法是什么?
浏览 1
提问于2015-06-24
得票数 0
3
回答
卡桑德拉使用星火的优势
、
、
、
、
另一方面,
Hadoop
提供了一致性而不是可靠性,因此适合于
分析
系统。它的接口是MapReduce,这是相当慢和太低的水平,以今天。所以这就是斯帕克斯进来的地方。Sparks使用
Hadoop
的HDFS,用更好的体系结构取代旧的MapReduce,该体系结构更好地利用内存而不是硬盘,并公开更好的接口,如RDD和dataframes。
浏览 3
提问于2017-03-13
得票数 0
回答已采纳
3
回答
为
Hadoop
practice创建或获取环境
、
、
、
我已经开始阅读有关
hadoop
的文章。我也想学习
实践
。由于
hadoop
是分布式环境,并被设计为在linux上运行,因此我不能在运行windows的本地计算机上
实践
它。我可以预先配置
hadoop
集群,但我更喜欢自己配置。
浏览 0
提问于2014-08-15
得票数 0
9
回答
为什么像Vertica/InfoBright/GreenPlum这样的面向列的数据库会对
Hadoop
大惊小怪?
、
、
、
馈送
Hadoop
集群并使用该集群将数据馈送到Vertica/InfoBright数据仓库有什么意义?谢谢!
浏览 6
提问于2011-11-25
得票数 5
1
回答
如何使用
hadoop
支持开发应用程序
、
、
、
我对
hadoop
和bigdata非常陌生,通过horton的工作,我对
hadoop
提供的Pig、Hive和不同类型的
分析
有了一些了解,但还不清楚开发阶段,请给我一些例子,说明如何开始使用
hadoop
分析
支持来构建一个应用程序
浏览 4
提问于2014-11-06
得票数 1
回答已采纳
3
回答
使用cassandra和
hadoop
的大数据lambda架构
、
、
我正在开发一个用于传感器数据和预测
分析
的大数据解决方案。我是大数据的新手,读过关于lambda-架构的文章。我考虑过将Cassandra数据库与
Hadoop
一起使用。Cassandra是一个高可用性和分区容错的数据库,
Hadoop
hdfs是一个用于大型
分析
作业的文件系统。
Hadoop
中的数据用于大型
分析
,而cassandra中的数据应该是我的
Hadoop
作业的结果。 这是否意味着我可以将原始数据存储在这两个文件中?我可以在Cassandra和
Hadoop</e
浏览 2
提问于2016-11-22
得票数 4
2
回答
es (ElasticSearch-
Hadoop
)是如何实现
Hadoop
的?
、
、
如果它仅仅是HDFS的
Hadoop
连接器,那么es-
hadoop
如何启用
Hadoop
分析
?
浏览 1
提问于2015-07-30
得票数 1
回答已采纳
1
回答
什么时候数据大到可以使用
Hadoop
?
、
、
我的雇主运行
Hadoop
集群,而且由于我们的数据很少大于1GB,我发现很少需要
Hadoop
来满足我们办公室的需求(这不是大数据),但我的雇主似乎想说我们正在使用
Hadoop
集群,所以我们正在积极地寻找需要使用我们的大型工具进行
分析
的数据我看到一些报道说,小于5tb的东西不应该使用
hadoop
。
Hadoop
成为数据
分析
实用解决方案的神奇大小是什么?
浏览 2
提问于2015-09-11
得票数 0
回答已采纳
1
回答
为什么不在
Hadoop
节点中启用虚拟节点?
网址:如果我在
分析
/
Hadoop
节点中启用虚拟节点,会发生什么情况?
浏览 1
提问于2013-11-14
得票数 2
回答已采纳
1
回答
如何利用
Hadoop
实时处理Postgres数据库?
、
、
我有一个Postgres数据库,用于生产服务器,需要定期使用
Hadoop
进行
分析
。在
Hadoop
中进行的每一个查询都应该基于Postges数据库中可能的最新版本。如何在
Hadoop
中进行近乎实时的数据
分析
?
浏览 4
提问于2015-05-19
得票数 2
回答已采纳
1
回答
Apache的
分析
--我可以使用
Hadoop
命令导入数据吗?
、
、
我试图使用
Hadoop
命令将数据导入Apache实例的
分析
中。我导航到以下页面:,其中给出了使用
hadoop
fs命令行的指令。我尝试了以下命令(用实例名替换主机名):但是,命令超时了。-- 问题:可以使用Apache的BigInsights文档
浏览 8
提问于2015-10-12
得票数 1
6
回答
如何将
hadoop
用于web应用程序?
我不知道如何将
Hadoop
集成到这个应用程序中,也不知道如何编写map- reduce程序。
浏览 0
提问于2011-08-09
得票数 16
1
回答
我无法在
Hadoop
集群中执行mapreduce作业
、
、
、
$
hadoop
jar /usr/lib/
hadoop
/
hadoop
-streaming-2.6.0-cdh5.13.0.jar -file mapper.py -mapper mapper.py -result它引发一个错误Not a valid JAR:/usr/lib/
hadoop
/
hadoop
-
浏览 4
提问于2019-11-10
得票数 0
回答已采纳
点击加载更多
相关
资讯
Hadoop 数据仓库建设实践(理论结合实践)
携程Hadoop跨机房架构实践
Uber容器化Apache Hadoop基础设施的实践
如何使用Mahout在hadoop进行集群分析
基于Hadoop的58同城离线计算平台设计与实践
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券