Mongodb可以与hadoop集成以进行更快的数据处理，但在此集成过程中( mongodb -> hadoop )，数据会从mongodb传输到hadoop。问题是，2.数据传输( mongodb -> hadoop )是一次性活动吗?如果是，mongodb的后续更新将如何反映在hadoop中。
浏览 2提问于2014-09-01得票数 3
6回答
如何搭建Hadoop处理环境？
、、、、
Apache Hadoop 是用于开发在分布式计算环境中执行数据处理应用程序的框架。旨在从单个服务器提供存储和计算资源的方式扩展到数千台机器。Apache Hadoop的核心部分由存储部分（Hadoop分布式文件系统）及其数据处理部分（MapReduce）组成。Hadoop将文件分割成大块，并将它们分发到群集中的节点上。那么如何搭建Hadoop处理环境？
浏览 2027提问于2018-10-24
我正在构建一个需要大量数据处理和分析的应用程序(同时处理大量文件)。
为此，我打算使用Hadoop (Map-reduce，Hbase(HDFS文件系统))。有时它可能只有很少聚合和分析数据，这些数据是由Hadoop计算的，但数据也不是那么大。
浏览 2提问于2016-06-20得票数 2
Hadoop地图-减少和它的回声系统(如蜂巢..)我们通常用于批处理。但是我想知道是否有任何方法可以使用hadoop MapReduce作为实时数据处理的例子，比如实时结果，实时tweet。如果不是，实时数据处理或分析的替代方案是什么？
浏览 0提问于2018-12-18得票数 2
回答已采纳
2回答
虚拟机上的Hadoop
、、、
为了实现可伸缩性，我们希望从MySQL迁移到Hadoop。运行在虚拟机上的hadoop集群会改善我们网站的性能吗？
在虚拟机(ESXi)上实现hadoop集群有哪些优点和缺点？
浏览 0提问于2011-01-26得票数 -2
这些文章分几部分编写，例如，我从IBM developer works获得了这些文章：
使用Hadoop的分布式数据处理，第2部分:更进一步
我将把这三篇文章分别编入索引。
浏览 1提问于2010-07-18得票数 2
1回答
我正在考虑将PyTables或MongoDB与PyMongo (或者Hadoop -谢谢)一起使用。是否有其他我应该考虑的文件结构/DB？
我要做的一些操作是计算一个点到另一个点的距离。
浏览 5提问于2012-10-08得票数 3
回答已采纳
我一直在查找Spark和MapReduce之间的区别，我真正发现的是Spark在内存和磁盘上运行，这使得它的速度大大加快。但想必，使用Spark，您无论如何都会在内存和磁盘之间移动数据，因此如果内存空间不足，您可以将一些数据移回磁盘，然后引入新数据进行处理。
浏览 0提问于2018-05-02得票数 0
随着see在市场上的增长，我可以看到spark在Hadoop上的主要用例如下：
而且处理得很快。
火花会在未来几天取代Hadoop吗？当火花并行运行时，Hadoop同时工作？(这是真的吗？)
浏览 0提问于2015-07-08得票数 3
回答已采纳
2回答
我们有一些相当大的数据集(用户事件和服务器日志信息- >100 GB)，这些数据处理变得相当困难。我看到了很多关于NoSQL/Hadoop/etc的活动，我想知道SV对成对解决方案有什么看法。绝对理想的情况是：<1秒用于sum(*)，其中event_type =
浏览 0提问于2010-07-26得票数 2
回答已采纳
1回答
我开始了解hadoop。我对它有了一些了解，但是当我读到关于Hive，Pig和其他Apache工具时，我感到很困惑。因此，有人能简单地概述一下hadoop和Apache的工具(Hive、Pig、等)，我想知道它们在处理大数据时是如何和在哪里使用的。
浏览 3提问于2014-05-20得票数 0
回答已采纳
我选择Hadoop进行数据处理，并在我的一个包含大量数据的项目中使用MongoDB进行存储。我配置并安装了hadoop，并执行了中给出的示例，该示例具有读取给定文本文档中出现的单词的次数的示例，并且运行良好。但是，当我尝试寻找一个简单的Java示例时，它将连接到MongoDB并执行简单的数据处理，例如，表中存储的记录数量属于某个简单条件(name like '%John%')。
有人有什么建议吗？
浏览 1提问于2013-05-24得票数 0
回答已采纳
1回答
目标是学习hadoop，而不是图像处理。因此，谁能建议我应该使用什么语言，c++或java，以及3d渲染器的一些标准实现。任何其他的帮助都是非常有用的。
浏览 0提问于2010-09-13得票数 1
1回答
我计划在我的基于web的应用程序中实现Hadoop框架。但我只是将其托管在本地主机中。我计划实现mapreduce和hdfs作为分布式文件系统。问题是，我要做的第一步是什么？我应该从什么开始呢？我对Hadoop框架进行了深入的研究。了解它是如何工作的，并尝试使用互联网上的wordcount示例。
浏览 2提问于2015-02-04得票数 0
2回答
我希望使用Hadoop MapReduce获得更好的数据处理性能。那么，我是否需要与Hadoop一起使用它呢？或者MapReduce可以与其他类型的分布式数据一起使用？请给我带路..。
浏览 1提问于2015-01-20得票数 0
回答已采纳
1回答
我正在我的笔记本电脑上运行模拟(Core2Duo1.8Ghz和4GB内存运行windows 7)，这需要很长时间。怎么做？我应该使用哪个操作系统？我的操作系统应该是服务器吗？我需要额外的硬件吗？
请给我指点任何教程或书籍。请给我你的宝贵建议和建议。
浏览 0提问于2011-05-30得票数 1
回答已采纳
1回答
你好，我想处理10亿行，23列的大量数据。但在熊猫身上，我甚至无法读取数据。那么，如何在我的Dell XPS 9570计算机上处理这些数据呢？我能用spark来做这个吗？有什么建议可以在我的电脑上处理吗？
浏览 11提问于2019-10-23得票数 0
1回答
我们在hadoop上工作了很多年。它被用于分布式数据存储以及数据处理。现在我们知道火花比hadoop要强。这是否意味着我们应该用火花取代hadoop生态系统？有人能详细说明一下吗？
浏览 2提问于2016-12-27得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
