腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
学习
Mapreduce
:
计算
的
是
reducer
还是
mapper
、
、
、
在由select count(*) from products where id = 2组成
的
mapreduce
作业中,count(*)操作发生在哪里,
是
在映射器中
还是
在
reducer
中?
浏览 13
提问于2020-06-16
得票数 0
回答已采纳
2
回答
一个
mapreduce
程序
的
输出作为另一个
mapreduce
程序
的
输入
、
、
、
、
我正在尝试一个简单
的
示例,其中一个
MapReduce
作业
的
输出应该是另一个
MapReduce
作业
的
输入。流程应该是这样
的
:
Mapper
1 -->
Reducer
1 -->
Mapper
2 -->
Reducer
2 (
Mapper
1
的
输出必须
是
Reducer
1
的
输入。
Reducer
1
的
浏览 2
提问于2015-06-16
得票数 2
2
回答
Hadoop将本地示例复制到HDFS
、
我
是
Hadoop
的
新手,我正在
学习
一些基本
的
教程来
学习
它。下面的教程之一希望我用Python编写一个Hadoop
MapReduce
作业,我已经成功地完成了所有工作,以下
是
总结
的
步骤: 我
的
问题
是
:如果我必须频繁地修改数据,然后运行<em
浏览 4
提问于2014-05-02
得票数 0
3
回答
Mapper
和
Reducer
是
Hadoop版本2中
的
接口吗?
、
、
、
我知道
Mapper
和
Reducer
是
Hadoop 2中
的
接口。但是在编写代码时,我仍然看到使用扩展映射程序或扩展还原器而不是实现.Is
的
例子,这是有原因
的
,
还是
因为向后兼容性而在旧版本中实现
的
?这是我
学习
的
链接
浏览 2
提问于2016-05-04
得票数 0
回答已采纳
1
回答
如何在Hadoop中迭代
MapReduce
?(郎朗: python)
、
、
、
我编写了一个
MapReduce
程序(
mapper
.py和
reducer
.py)来处理Hadoop中
的
PageRank问题。[
mapper
->
reducer
] -> [<
浏览 1
提问于2017-04-13
得票数 0
回答已采纳
1
回答
Map可以
计算
多次出现
的
次数吗?
、
我在一篇教程中读到,Map像这样
计算
字典中
的
每个单词:('house', 1)。它是这样工作
的
吗?
浏览 0
提问于2018-11-29
得票数 0
2
回答
不考虑
Mapper
和
Reducer
接口
、
、
、
、
这是我
的
mapper
函数头行这是我
的
Reducer
函数头在编译代码时 PageRank.java:30:错误:这里没有预期
的
接口extends
Mapp
浏览 2
提问于2015-04-27
得票数 0
1
回答
纱线记忆杀灭极限
的
问题
、
我有这样
的
线在纱/
mapreduce
吐露:<value>2048</value> <value>1024</value> <name>yarn.nodemanager.vmem-pmem-ratio<
浏览 1
提问于2016-08-18
得票数 0
1
回答
用纱线比较器在
MapReduce
Python中进行字数排序
、
、
、
、
以下
是
我为此目的编写
的
四个文件(2个映射程序和2个还原程序,因为一个Map Reduce作业无法解决这个问题):import sys -D
mapreduce
.job.reduces=${NUM_REDUCERS} \ -
mapper
&quo
浏览 2
提问于2019-02-03
得票数 2
回答已采纳
1
回答
理解Python代码
的
执行流程
我试图做家庭作业,从数据操作
的
比例:系统和算法在Curesra与python有关。通常,我在理解基本代码方面存在问题,这是作为
MapReduce
alogorythm
的
一个例子。执行来自def __init__(self):
的
MapReduce
.py部件 创建了def
mapper
(record):和def
reducer
(key,list_of_values,
reducer
) -从
MapReduce
浏览 2
提问于2015-12-11
得票数 0
回答已采纳
1
回答
Hadoop
mapreduce
设计/路由映射器和减速器在一个作业中
、
、
、
、
我想在一个工作中做一个这样
的
mapreduce
设计。示例:
Mapper
A->
Mapper
C在那个
Reducer
B之后->
Mapper
C 映射器C->
Reducer
C ************************
浏览 1
提问于2015-01-28
得票数 0
1
回答
在环境中使用Hadoop流运行python映射减少作业时出错
、
、
、
我
的
地图减少python脚本、输入文件和作业结果输出都位于中。/
mapper
_prod_cat.py -
mapper
gs://bucket-name/intro_to_
mapreduce
/
mapper
_prod_cat.py -file gs://bucket-name/intro_to_
mapreduce
/
reducer
_prod_cat.py -
reducer</em
浏览 1
提问于2017-12-28
得票数 2
回答已采纳
1
回答
mapreduce
中处理
的
文件
、
、
我试图确定哪些文件
是
由AppEngine上
的
mapreduce
作业处理
的
。( "project.task.proc_files.
mapper
", ,
mapper
_params={ 's
浏览 4
提问于2014-03-17
得票数 0
回答已采纳
1
回答
在调用
mapreduce
函数时如何将参数传递给映射函数?
、
、
%% find first clustering from all chunksend 第一个函数运行良好,结果=
mapreduce
(data,@k_means_
Mapper
,@k_means_
Reducer
);但是,我希望将索引作为k_m
浏览 1
提问于2016-04-30
得票数 0
回答已采纳
2
回答
Hadoop流-意外参数
、
、
、
不知道
是
窃听器
还是
我做错了什么。 如有任何资料,将不胜感激。hadoop jar /usr/lib/hadoop-
mapreduce
/hadoop-streaming.jar -files /home/cloudera/
mapper
.py /home/cloudera/
reducer
.py -
mapper
"python
mapper
.py" -<em
浏览 0
提问于2018-02-06
得票数 0
回答已采纳
2
回答
Hadoop:找不到类
、
我刚刚开始
学习
hadoop,并遵循了"Hadoop --权威指南“。 ^ symbol: class
浏览 2
提问于2014-11-29
得票数 0
4
回答
MapReduce
是
延续传递风格(CPS)
的
一种吗?
、
我在读,我想知道
MapReduce
是否可以被归类为一种形式
的
延续传递风格,也就是CPS。 我也想知道CPS如何利用不止一台
计算
机来执行复杂
的
计算
。也许CPS使使用变得更容易。
浏览 1
提问于2010-05-06
得票数 1
回答已采纳
1
回答
Hadoop
MapReduce
Wordcount python执行错误
、
、
、
、
我正在尝试执行python
MapReduce
wordcount程序。/usr/lib/hadoop-0.20-
mapreduce
/contrib/streaming/hadoop-streaming-2.6.0-mr1-cdh5.12.0.jarhadoop jar /u
浏览 4
提问于2017-10-31
得票数 0
回答已采纳
2
回答
在
MapReduce
中地图
的
意义是什么?
例如,为什么不直接使用:
reducer
= (accum, x) => accum + (x + 2)
mapper
= (x) => x + 2所以:// 0 2 [0, 1].map(
mapper
).reduce(
reducer
, 0)//
浏览 0
提问于2018-02-08
得票数 0
回答已采纳
1
回答
使用Python map reduce实现Avro数据序列化
、
、
、
这里
的
任何人都在做这件事,或者任何建议都会有很大
的
帮助。 提前谢谢。
浏览 2
提问于2015-02-12
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大数据核心框架MapReduce过程解析
hadoop学习笔记四:MapReduce简介
MaxCompute MapReduce
通过MapReduce降低服务响应时间
hadoop学习笔记五:MapReduce详解
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
腾讯会议
活动推荐
运营活动
广告
关闭
领券