由于有免费的微型实例，我想利用这些实例来运行我的mapreduce作业，似乎没有这样做的选项，因此在这方面的任何帮助都将是很好的。另外，如果这完全不可能，我想知道如何为mapreduce作业挑选任何运行中的实例(可能是EMR提供了通过控制台选择的小实例)？我基本上计划运行几个小实例，并让我所有的小mapreduce作业使用这些实例，这样我就可以赚到我支付的大部分钱。
提前感谢:)
浏览 0提问于2013-10-15得票数 0
我正在使用Cloudera的谷歌计算高内存实例(13 GM )。8 GB的免费冲压在机器上可用。你能帮我修一下吗？sunny@hadoop-m:~$ hadoop jar /opt/cloudera/parcels/CDH-5.3.0-1.cdh5.3.0.p0.30/jars/hadoop-mapreduce-examplesResourceManager at hadoop-m.c.sunny-hadoop-trial.internal/10.240.253.233:
浏览 1提问于2014-12-23得票数 0
回答已采纳
有谁知道任何免费访问的集群，这些集群对公众开放，并且使用Hadoop/MapReduce框架？有很多关于如何使用MapReduce的教程，但是有没有一种方法可以在不使用本地单机并安装所需框架的情况下测试这些示例呢？
谢谢!
浏览 0提问于2011-03-17得票数 3
回答已采纳
2回答
我刚刚安装了免费试用版的Google Cloud platform。为了使用DataStore运行MapReduce任务，要求运行但我无法在本地获得这个文件，这是有充分理由的，这种运行MapReduce作业的方式似乎被弃用了在上看到这一点。这是真的吗?有没有其他方法可以在不需要BigQuery的情况下从本地命令行创建MapReduce任务？
浏览 3提问于2015-06-08得票数 1
1回答
我读到了mapreduce，我想知道一个特定的场景。假设我们有几个文件(例如fileA、fileB、fileC )，每个文件由多个整数组成。
浏览 3提问于2015-12-14得票数 5
我试图在一个免费的mapReduce计划中使用方法，但是我得到了这个错误at TLSSocket.emit (events.js:188:7)stream_readable.js:134:10)Unhandled rejection MongoError: CMD_NOT_ALLOWED: mapreduce
浏览 7提问于2017-08-13得票数 0
回答已采纳
我还没有找到在Amazon弹性mapreduce实例上运行的AMI。您不能指定一个实例，但是可以通过运行一个引导操作来自定义mapreduce实例。不过，我想知道我是怎么开始的。
浏览 0提问于2011-03-30得票数 2
回答已采纳
1回答
Hadoop2.2.0流内存限制
、、、、
每个hadoop实例使用默认hadoop设置启动大约7个hadoop容器。所以我们在互联网上发现的是：
做得对，这就给了我们每个节点一个容器。
浏览 4提问于2014-02-21得票数 0
回答已采纳
/outfile 15/01/30 10:48:38 INFO mapreduce.Job: map 0% reduce 0%Container [pid=22533我正在使用Cloudera Manager (免费版) .These是我的配置：
yar
浏览 0提问于2015-01-31得票数 2
6回答
最近，我读了很多关于MapReduce/Hadoop的文章，我认为这是行业当前发展的方向。我想开始学习MapReduce/Hadoop，我认为最好的开始方式是实现一些小项目。
浏览 3提问于2010-09-01得票数 9
回答已采纳
1回答
我正在与亚马逊的MapReduce网络服务的一个大学项目。为了将数据用于MapReduce，我需要将它们从关系数据库(AWS RDS)转储到S3中。在MapReduce完成后，我需要拆分输出文件并将其中的一大块加载到它们自己的S3存储桶中。
在Amazon Web服务环境中执行此操作的好方法是什么？最好的情况:除了用于RDS和MapReduce的实例之外，是否可以在不使用额外的EC2实例的情况下实现这一点？我将python用于映射器和reducer函数，并将json说明符用于Ma
浏览 2提问于2011-01-12得票数 0
回答已采纳
例如，我只使用一个实例启动mapreduce作业，但是如果该实例达到50%的利用率(例如，我希望使用创建的AutoScaling组来启动一个新实例)。这有可能吗？
你知道这是否可能吗？或者弹性mapreduce，因为它是“弹性的”，如果它需要自动启动更多的实例而没有任何配置？
浏览 3提问于2015-04-24得票数 0
回答已采纳
1回答
我从twitter收集数据并将其存储在hdfs上。我想根据时间戳对这些tweet进行排序，但这个查询需要很长时间。可以做些什么来加速这个查询呢？
浏览 4提问于2015-08-21得票数 0
def __init__(self): ctx = mapreduce.context.get() assert when570, in dispatch Fi
浏览 1提问于2013-05-25得票数 3
1回答
我一直在回顾appengine中的新"“，并试图以这样一种方式来组织这个应用程序，即通过dispatch.yaml将最苛刻的任务通过模块配置路由到更强大的实例。但是，当试图在dispatcher中配置"/mapreduce/“uris时，它们似乎从未在正确的模块中运行，它们总是在默认模块中运行。调度员看起来如下：dispatch: module: b
浏览 2提问于2013-09-21得票数 2
回答已采纳
在本例中，mapreduce处理程序检查它得到的实体，如果它不是活动的，就什么也不做，不写。然而，在大约7个小时后，我的免费数据存储写入配额将从mapreduce调用中耗尽。根据我的粗略估计，它看起来就像只运行mapreduce导致了~ 120写/调用。(粗略计算，60次调用/小时*7小时= 420次调用，50k操作限制/ 420次调用~ 120次写入/调用)
Q1:有人能验证只运行mapreduce触发器~120数据存储写入吗？为了绕开它，在启动mapre
浏览 3提问于2012-02-22得票数 4
回答已采纳
1回答
所有的实例都是r2.2xsize。最初，一切看起来都很好，如下所示：INFO mapreduce.Job: map 1% reduce 0%INFO mapreduce.Job: map 6% reduce 0%
INFO mapreduce.Job: map 7% reduceINF
浏览 2提问于2017-04-13得票数 1
回答已采纳
有没有办法从计算引擎服务器调度AppEngine mapreduce？我在AppEngine上运行了生产应用程序，我要做的是启动MapReduce作业并从计算引擎实例跟踪它们的状态，完成MR作业后，在计算引擎实例上执行一些额外的工作。
浏览 2提问于2015-04-29得票数 0
[hadoop@master mapreduce]$ hadoop jar hadoop-mapreduce-examples-2.6.4.jar wordcount /wordcount/input//09/22 20:33:50 INFO input.FileInputFormat: Total input paths to process : 0
17/09/22 20:33:50 INFO mapreduce.JobSubmitter: number of spl
浏览 3提问于2017-09-22得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
