我正在尝试使用MapReduce连接程序在python中创建一个mongodb_hadoop应用程序。我安装了一个带有Hadoop2.2.0的集群。我已经安装了mongodb_hadoop连接器v1.3.0。我安装了mongodb，并创建了一个名为hadoop_db的测试数据库，其中包含一个名为“整数”的集合，其中包含整数值。我的工作是基于这个bin/hadoop jar share/<e
浏览 6提问于2014-07-30得票数 1
回答已采纳
/bin/sh
wget -P /home/hadoop/lib https://github.com/<
浏览 1提问于2015-03-11得票数 4
但是如何将从DataFrame创建的MongoDB数据中的数据保存回MongoDB呢？SparkContext sc = new SparkContext()config.set("mongo.input.uri","mongodb
浏览 2提问于2015-07-20得票数 1
1回答
我是Mongodb和Hadoop的新手。我正在尝试访问mongodb数据作为hadoop mapreduce作业的输入。我不太知道如何指定使用哪个集合来获取数据。.jar -output user/test/output/
-inputformat com.mongodb.hadoop.mapred.MongoInputFormat-outputformat com.mo
浏览 1提问于2015-04-10得票数 0
(MapTask.java:387) at org.apache.hadoop.mapred.Child在另一个中的Hadoop流中提到了此错误。我的工作是这样的：
hadoop jar /Volumes/Locodrive/hadoop/mongo-hadoop/streaming/target&
浏览 2提问于2012-06-25得票数 0
回答已采纳
任何人都可以给出从mongodb到rdbs的示例代码..。我已经尝试过从mongodb和mongodb.For中的输出存储中获取数据，我知道如何在java作业中进行hadoop配置。哪个hadoop版本同时支持mongodb和rdbs？
可以使用多个集合作为输入.？如果可能的话，我们怎么能做到呢？我在hadoop中尝试了mongodb查询，当我定义排序时，它正在运行fine.But，或者limit...It不工作properly..even --它
浏览 2提问于2012-08-31得票数 1
1回答
我知道可以通过hadoop从mongodb读取和写入数据。我想知道这个适配器在从mongodb集合中读取数据时是使用mongodb的本地驱动程序，所以它使用的是mongod实例还是这个适配器读取的是直接数据集合？另外，当hadoop读取mongodb的数据进行map reduce处理时，hadoop的这个map reduce不会锁定mongodb的数据收集吗？换句话说，当hadoop读取mongodb数据时，
浏览 3提问于2012-03-27得票数 0
回答已采纳
Mongodb可以与hadoop集成以进行更快的数据处理，但在此集成过程中( mongodb -> hadoop )，数据会从mongodb传输到hadoop。问题是，2.数据传输( mongodb -> hadoop )是一次性活动吗?如果是，mongodb的后续更新将如
浏览 2提问于2014-09-01得票数 3
1回答
我正在尝试使用mongodb连接器与猪或流从mongodb加载/存储数据。://hadoop:password@127.0.0.1:27017/admin'
STORE raw
INTO 'mongod
浏览 4提问于2015-09-24得票数 1
回答已采纳
我正在尝试使用Scala将示例MongoDB集合加载到Spark，然后将其保存为文本文件。<init>(MongoClientURI.java:165) at com.mongodb.hadoop.util.MongoConfigUtil.getInputURI(MongoConfigUtil.java:3
浏览 8提问于2015-10-27得票数 1
2回答
我正在尝试将HDFS数据移动到MongoDB中。我知道如何使用sqoop将数据导出到mysql。我认为我不能使用sqoop作为MongoDb。我需要帮助才能理解怎么做。
浏览 2提问于2014-11-24得票数 0
回答已采纳
2回答
嗨，我是Hadoop和NoSQL技术的新手。我开始学习世界计数程序，通过读取存储在HDFS中的文件并对其进行处理。现在，我想在MongoDB中使用Hadoop。从启动程序。现在与我混淆，它将mongodb数据存储在本地文件系统上，并将数据从本地文件系统读取到map/reduce中的HDFS，然后再次将其写入mongodb本地文件系统。当我学习HBase时，我们可以将它配置为将它的数据存储在HDFS上，hadoop可以直接在HDFS(map/reduce)上处理它。如何
浏览 5提问于2013-02-14得票数 2
回答已采纳
如果你认为我应该更深入地研究NoSQL，MongoDB是可行的吗?还是有其他你推荐的东西？
我在考虑使用Node.js、Rails或Razor MVC编写代码。
浏览 0提问于2012-06-01得票数 0
我正在尝试运行EnronMail示例。因此，我正在使用GitHub的java代码示例：，我根据需要调整了服务器名称，并添加了用户名和密码。Exception in thread "main" org.apache.spark.SparkException: Task not serializable at org.apache.spark.util.ClosureCl
浏览 4提问于2017-03-28得票数 2
回答已采纳
1回答
我一直在研究NoSQL和Hadoop的数据仓库，但是我以前从来没有使用过这种技术，我想询问一下下面的内容是否可以检查我对这种技术的理解是否正确。如果我的数据存储在MongoDB中，我是否可以使用使Hiveql查询直接到MongoDB，并将这些查询的输出再次存储在MongoDB中，而不是HDFS中？如果HiveQL查询是map--当我在HiveQL中加入时减少作业--对我来说，它是否已经自动“加入”了地图中的MongoDB数据--减少，而不必担心缺乏对MongoDB中的连接和聚合的支持？
浏览 0提问于2014-02-21得票数 0
回答已采纳
有没有可能从hadoop mongodb插件读取mongodb数据，使用mapreduce hadoop处理数据，以及当输出结果不使用hadoop mongodb插件但将mapreduce hadoop
浏览 0提问于2012-04-01得票数 1
回答已采纳
我已经安装了hadoop 2.8.0、Hive2.1.1和MongoDB 3.4.6。和一切都可以单独运行。CREATE EXTERNAL TABLE testHive id STRING,)
STORED BY 'com.mongodb.hadoop.hive.MongoStorageHandler. com/mongodb/hadoo
浏览 5提问于2017-08-08得票数 1
1回答
我试图使用Java在MongoDB中保存tweet，这就是我所拥有的； }正如您所看到的，我可以使用rdd.saveAsTextFile将用户存储在文本文件中，但我需要的是一种将这个rdd保存到数据库(MongoDB
浏览 2提问于2015-02-09得票数 0
回答已采纳
mongo-hadoop和mongo-spark连接器有什么不同，pymongo只能和mango-hadoop一起使用吗？
pymongo只与mongo-hadoop一起使用吗？
浏览 2提问于2018-07-10得票数 0
"
但是当运行sbt package时，它会抱怨找不到mongo_2.10依赖：
[warn] module
浏览 3提问于2016-03-31得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
