腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
1
回答
1个
Hadoop
和Hbase大簇与1个
Hadoop
簇+1个Hbase簇
hadoop
、
hbase
Hadoop
将通过从Hbase读取数据并将数据写入Hbase来运行许多作业。假设我有100个节点,那么有两种方法可以构建
Hadoop
/Hbase
集群
: 哪种
浏览 4
提问于2014-04-19
得票数 1
回答已采纳
1
回答
在Amazon的EMR/EC2上使用
hadoop
运行mahout
hadoop
、
amazon-web-services
、
amazon-ec2
、
mahout
、
emr
我想将当前本地
hadoop
集群
迁移到amazon中。在这个
hadoop
集群
中,我使用的是mahout、hbase和hive等服务。我现在在亚马逊有两个
选择
,要么
选择
纯EC2实例,要么
选择
弹性地图减少
集群
。我想要一些关于移动具有这类需求的
集群
的更好
选择
的建议。
浏览 1
提问于2014-02-14
得票数 4
1
回答
如何部署星火,使其资源利用率最高
hadoop
、
docker
、
apache-spark
、
openstack
、
apache-cloudstack
我有10个服务器(16G内存,8个核心),想要部署
Hadoop
和Spark,您能告诉我哪一个计划可以最大限度地利用资源吗?
浏览 3
提问于2014-10-07
得票数 0
1
回答
上的
Hadoop
:如何添加外部软件
google-compute-engine
、
hortonworks-data-platform
、
google-hadoop
我需要在上建立一个
Hadoop
集群
。对我来说还不清楚该
怎么
做。我脑海中浮现的
选择
是:选项1)基本上是我过去在AWS上运行
Hadoop
所必须做的事情,老实说,这是一个需要维护的痛苦。我对选项2)非常满意,我不确定butil是否允许这样做。您认为还有其他方法来设置
hadoop
集群
吗?我们非常感谢
浏览 1
提问于2015-01-15
得票数 0
回答已采纳
1
回答
与单独安装HBase和
Hadoop
相比,同时安装HBase和
Hadoop
有什么利弊?
hadoop
、
hbase
、
hdfs
、
distributed-computing
我的意思是,有两个
选择
: 1.在
Hadoop
集群
上安装HBase,这也是离线计算,所以只有1个
hadoop
集群
。2.安装一个用于离线计算的
Hadoop
集群
,然后再安装一个仅供HBase使用其HDFS的
Hadoop
集群
。这两个选项的优缺点是什么?
浏览 2
提问于2013-07-11
得票数 1
1
回答
使
Hadoop
以Kerberos用户身份运行
hadoop
、
mapreduce
、
hdfs
、
kerberos
在Kerberos中有一个名为"foo“的用户,
hadoop
集群
受到Kerberos的保护。我想让
hadoop
集群
以"foo“的身份运行作业,我该
怎么
做?什么配置允许
hadoop
客户端指定kerberos用户帐户名运行,就像
hadoop
集群
'kinit username‘然后运行mapreduce作业一样?仅供参考,
hadoop
2.6.0
浏览 2
提问于2015-11-03
得票数 0
1
回答
Amazon Cloud上的
Hadoop
amazon-ec2
、
hadoop
、
mapreduce
、
amazon
、
amazon-ami
我正在尝试在Amazon Cloud上设置运行一些
hadoop
MapReduce作业,但我正在努力成功地创建一个
集群
。我已经下载了ec2文件,有我的证书和密钥对文件,但我相信是AMI给我带来了麻烦。如果我试图运行一个包含一个主节点和n个从节点的
集群
,我会使用标准兼容的AMI启动n+1实例,然后在终端中运行代码"
hadoop
-ec2 start cluster name n“。是否已经在amazon机器上安装了
hadoop
,并且可以访问和更改此文件? 谢谢
浏览 2
提问于2011-11-08
得票数 0
回答已采纳
5
回答
用Java往腾讯云服务器里的
Hadoop
写入数据时出现异常ipc.RemoteException?
云+校园
、
云服务器
、
java
、
hadoop
我用腾讯云的学生机在CentOS7的系统上搭建了
Hadoop
的伪分布式的环境,配置等都正常,datanode,namenode 等进程都正常开启,http的50070也都能正常访问,空间足够,然后用Windows\n".getBytes()); output.close();下面是
Hadoop
的logs文件夹中
hadoop
-ma-namenode-spring.log文件的报错 2018-04-19 19:22:42,078
浏览 4206
提问于2018-04-19
1
回答
将蜂窝数据从一个
Hadoop
集群
移动到另一个
Hadoop
集群
,而不使用distcp命令?
hadoop
如何不用distcp命令将数据从一个
Hadoop
集群
移动到另一个
Hadoop
集群
。因为我们不能用这个。我们还有其他
选择
像Sqoop或Flume吗?
浏览 2
提问于2015-10-13
得票数 0
1
回答
怎么
登录弹性
hadoop
集群
?
官方文档
、
hadoop
官方文档说要用登录子机的用户名密码, 在创建集群时根本没有设置。在哪可以看到应该用哪个账户密码登录啊?
浏览 518
提问于2017-11-06
1
回答
如何将文件从HDFS复制到远程HDFS
hadoop
、
hdfs
我希望将文件从
Hadoop
集群
复制到远程
集群
。我知道远程名称节点的IP和端口。
hadoop
-cp hdfs://MyNamespace/path/file hdfs://RemoteNamespace/path/file 但是,如果不配置
hadoop
_conf_di
浏览 1
提问于2018-04-20
得票数 0
回答已采纳
2
回答
将应用程序从Oracle更改为
Hadoop
java
、
sql
、
ajax
、
oracle
、
hadoop
我想知道将整个套件转换为
Hadoop
会花费多少工作成本?下面是一些问题,可以帮助我掌握它。这里也有一些Ajax,这与SQL和
Hadoop
有什么不同? 在解释与
Hadoop
有关的任何事情时,请考虑我是初学者。
浏览 3
提问于2014-03-27
得票数 2
回答已采纳
2
回答
动物园管理员和卡夫卡在
Hadoop
2.6
集群
中的位置
hadoop
、
apache-zookeeper
、
apache-kafka
Hadoop
2.6使用Yarn作为下一代地图减少,同时也是
集群
管理器。对于
集群
管理服务,我们还需要使用
Hadoop
2.6中的ZooKeep2.6吗?我们
怎么
设置动物园管理员。如何为
hadoop
集群
安装Kafka连接。什么是卡夫卡的消费者和生产者将数据发送到
hadoop
文件系统。我已经设置了
Hadoop
2.6单节点
集群
。接下来,我理解的方法是让动物园管理员和Kafka负责数据流到
hadoop<
浏览 2
提问于2015-07-27
得票数 4
回答已采纳
2
回答
在spark下载页面上,预置的
hadoop
和用户提供的
hadoop
有什么区别?
java
、
scala
、
apache-spark
、
hadoop
长期以来,这些问题一直困扰着我: 第二个
选择
器中有五种包类型,当第一个
选择
器
选择
版本2.4.4 .And时,我对其中的三个类型感到困惑:Pre-built for Apache
Hadoop
2.7、Pre-builtwith user-provided Apache
Hadoop
、Pre-built with scala 2.12 and user-provided Apache
Hadoop
.Let me逐一列出我的问题Pre-built for Apache
Hadoop<
浏览 1
提问于2019-11-26
得票数 1
1
回答
在群集上部署Mahout作业
hadoop
、
mapreduce
、
mahout
我是
Hadoop
/Mahout的新手,我理解这些概念,但我在将Mahout作业部署到已经设置的计算机
集群
时遇到了问题。我已经在一台计算机上使用了Mahout,但是我应该
怎么
做才能使它在已经形成的
Hadoop
集群
上运行呢?我有一个安装了
Hadoop
0.20.2和Mahout 0.9的
集群
,其中包含
Hadoop
1.2.1。我应该复制什么jars才能运行包含Mahout调用的代码,或者我还应该做些什么才能让它在
Hadoop
<e
浏览 0
提问于2014-10-29
得票数 0
1
回答
在Ubuntu、
Hadoop
文件和Hortonworks或Cloudera上安装
Hadoop
ubuntu
、
hadoop
、
hortonworks-data-platform
我在我的机器上安装
Hadoop
。目前我有Windows和Ubuntu操作系统。我一直在寻找安装
Hadoop
的可能方法,我看到了Hortonworks网站。我读过,使用
Hadoop
文件对理解
hadoop
要好得多,但是它是否适合那些只想用
Hadoop
创建应用程序的人呢?我更喜欢使用操作系统,而不是VM。 谢谢。
浏览 2
提问于2016-04-15
得票数 0
回答已采纳
2
回答
在亚马逊ec2上运行
hadoop
作业:多节点
集群
amazon-ec2
、
hadoop
、
mapreduce
我必须在亚马逊EC2
集群
上运行
hadoop
mapreduce作业。谁能告诉我一些好的文档。我已经为此努力了12个多小时了。
浏览 2
提问于2011-12-13
得票数 4
2
回答
我必须手动启动GCloud上的
Hadoop
群集
hadoop
、
google-cloud-platform
几个月来,我一直在使用使用Google脚本创建的
Hadoop
集群
。每次启动机器时,我都必须使用以下命令手动启动
Hadoop
:cd /home/
hadoop
/
hadoop
-install/sbin除了脚本,我还能
怎么
解决这个问题呢?(
集群
创建后的第一次引导总是自动启动
Hadoop
,为什么不总是这样呢
浏览 0
提问于2015-12-14
得票数 0
1
回答
Hadoop
Cassandra Pig - row count查询运行速度很慢,只有一个map任务
hadoop
、
cassandra
、
apache-pig
我有一个4节点的Cassandra
集群
,它也是一个
hadoop
集群
当我运行pig脚本来
选择
和计算Cassandra表的行数时-它会创建具有1个map任务的
hadoop
作业-并且需要很长时间才能完成该作业为什么
hadoop
不创建多个地图作业?
浏览 1
提问于2015-02-18
得票数 0
1
回答
hadoop
cdh4作业无法从权限错误开始
hadoop
、
configuration
、
hbase
、
hdfs
、
cloudera
:~ # sudo -u mapred
HADOOP
_CLASSPATH=`hbase classpath`
hadoop
jar /home/mapred/cdr-
hadoop
-0.0.0-SNAPSHOT.jar
hadoop
0 2013-08-08 10:06 /tmp/
hadoop
-mapred/mapred/system -rw-rw-rw- 3 mapred
hadoop
- hdfs
浏览 3
提问于2013-08-08
得票数 3
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
对象存储
云点播
实时音视频
活动推荐
运营活动
广告
关闭
领券