腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
我可以使用
hadoop
jar命令来运行普通的java
程序
吗?
、
我的Java代码中有一些
hadoop
文件系统操作(例如:hdfs mkdir)。当我尝试使用java -cp运行java
程序
时,在
linux
本地文件系统中创建了目录。因此,我使用
hadoop
jar命令运行
程序
,并在hdfs中创建了目录。现在我计划使用
hadoop
jar命令来运行整个java
程序
。我想知道使用
hadoop
jar命令会不会有问题,特别是当从本地文件夹读取文件或
执行
下面的Runtime.getRuntime().exe
浏览 2
提问于2017-05-29
得票数 0
2
回答
SSH:在终端上运行的javac命令在SSH上
执行
时不起作用
、
、
、
、
我使用Python代码在
Linux
(Cloudera)机器上使用SSH运行
Hadoop
程序
。 我在将java文件编译成类文件时遇到了一些困难。当我从
Linux
终端
执行
命令:javac -cp /usr/lib/
hadoop
/*:/usr/lib/
hadoop
/client-0.20/* remote_
hadoop
/javasrc/*时,所有
浏览 0
提问于2014-12-19
得票数 0
回答已采纳
2
回答
关于使用C#与
Hadoop
FileSystem对话的问题
、
、
目前,我的应用
程序
在
Linux
上使用带有MONO的C#来与本地文件系统(例如ext2、ext3)通信。基本操作包括打开文件、对文件进行写/读和关闭/删除文件。我的问题是:如果我在
Linux
机器上安装
Hadoop
文件系统。然后,我需要对现有函数进行哪些更改,以便它们与
hadoop
文件系统通信,以便对文件
执行
基本操作。由于
Hadoop
基础设施是基于Java的,所以任何C# (在
linux
上使用MONO )应用
程序
将如何
浏览 3
提问于2010-01-11
得票数 3
4
回答
运行WordCount.java时显示错误
、
、
我试过这段代码:[search path for source files: /var/root/
hadoop
-1.0.4/
hadoop
-1.0.4-core.jar]WordCount.jav
浏览 3
提问于2013-03-14
得票数 2
回答已采纳
1
回答
Amazon EMR问题
、
、
我必须将自定义
Linux
应用
程序
的输出提供给
Hadoop
,而Amazon EMR似乎是一个很好的实验方法。我真的刚刚开始研究
Hadoop
和Amazon文档,所以一些建议将不胜感激……谢谢。
浏览 0
提问于2013-10-02
得票数 0
1
回答
hadoop
用户应该在sudoers文件中吗?
、
、
我正在学习
Hadoop
(2.7.1)。我正在Ubuntu (15.04)上配置它,并为
Hadoop
创建了一个单独的用户,以将
Hadoop
文件系统与
Linux
文件系统隔离开来。但是,当我试图在这个
hadoop
用户下使用sudo时,我会得到一个错误: 这个用户应该在sudoers文件中吗?在哪种情况下,我应该在
hadoop
和root用户下工作?
浏览 6
提问于2016-07-18
得票数 0
回答已采纳
2
回答
设置(
Linux
)
Hadoop
集群
、
、
是否需要先设置
Linux
集群才能设置
Hadoop
集群?
浏览 0
提问于2009-09-30
得票数 3
1
回答
使用.exe作为映射器的一部分(
Hadoop
)
、
在相关信息可以被obtained.Is之前,需要一个可
执行
文件来处理文件。实现这一点的最好方法是什么?
浏览 2
提问于2011-02-26
得票数 1
1
回答
如何使用本地Windows Box上安装的Apache Nifi实例连接到安装了
Hadoop
的远程
Linux
节点?
、
、
如何使用本地Windows Box上安装的Apache Nifi实例连接到安装了
Hadoop
的远程
Linux
节点?另外,如何使用这些Nifi本地实例在安装了
Hadoop
的远程
Linux
节点上
执行
数据迁移活动?我已经在这些远程
Hadoop
集群上启用了Kerberos。
浏览 0
提问于2017-02-27
得票数 0
2
回答
hdfs://localhost:9000/home/hduser/sqoop/lib/hsqldb-1.8.0.10.jar : java.io.FileNotFoundException:文件不存在
、
、
我基本上是一个mysql的家伙,是
hadoop
的新手,试图通过sqoop和下面的命令在我的
hadoop
系统上导入一个mysql表,但得到了错误。我在网上搜索,但没有得到任何可能的解决方案。-jvm1.2.jar-rwxr-xr-x 1 hduser
hadoop
167KAug 1 2014 avro-mapred-1.7.5-
hadoop
2.jar -rwxr-xr-x 1 hd
浏览 1
提问于2015-02-25
得票数 0
回答已采纳
2
回答
用于简单纱线应用的NoClassDefFoundError
、
、
我正在尝试从运行简单的yarn应用
程序
。但是我在我的应用
程序
错误日志中得到了以下异常。//*:/usr/lib/
hadoop
-hdfs/./:/usr/lib/
hadoop
-hdfs/lib/*:/usr/lib/
hadoop
-hdfs/.//*:/usr/lib/
hadoop
-y
浏览 3
提问于2014-05-05
得票数 2
回答已采纳
2
回答
将LD_LIBRARY_PATH或java.library.path设置为纱线/
Hadoop
2作业
、
我有一个
Hadoop
FileSystem,它使用带有JNI的本地库。 显然,我必须独立于当前
执行
的作业包含共享对象。但是我找不到告诉
Hadoop
/Yarn应该在哪里查找共享对象的方法。这有助于资源和nodemanager,但是实际的作业/应用
程序
失败了。在
执行
wordcount示例时打印LD_LIBRARY_PATH和java.library.path将产生以下结果。amd64:/usr/lib/x86_64-
linux
-gnu
浏览 5
提问于2015-08-03
得票数 2
回答已采纳
2
回答
Java和
Hadoop
显然没有正确安装
、
、
我是
Hadoop
新手,在Ubuntu 18.10中第一次设置了我的环境tar -xvf jre-8u101-
linux
-i586.tar.gz tar -xvf
hadoop
-2.7.3.tar.gz=$
HADOOP
_HOME/etc
浏览 0
提问于2019-05-08
得票数 0
2
回答
虚拟机上的
hadoop
群集
我必须设置一个集群,在我的计算机上使用5个虚拟机和
hadoop
。配置需要端口号。有人能在这方面给我点启发吗?我是个初学者
浏览 5
提问于2012-05-12
得票数 0
2
回答
hadoop
-2.7.2中缺少/user目录
我是
hadoop
的新手。我最近在ubuntu 14.04操作系统上安装了Apache
Hadoop
2.7.2的稳定版本。我正在尝试
执行
一些基本的
Hadoop
命令,如下所示该命令给出了正确的输出,如下所示。 我的.bashrc文件的内容如下: hd
浏览 0
提问于2017-01-03
得票数 1
2
回答
根用户或非根用户的HDFS start-all.sh
、
、
、
、
我正在学习
Hadoop
,并想尝试伪分布式操作/var/run/
hadoop
/
hadoop
-foo-user-namenode.pid: permission denied /var/run/
hadoop
/
hadoop
-
浏览 7
提问于2013-02-09
得票数 0
2
回答
windows上的配置单元必须使用Cygwin
、
我已经在我的windows7机器上设置了
Hadoop
2.5.2。要求是在
hadoop
上加载平面文件,处理平面文件上的数据,并从中呈现报告。确定的技术是
Hadoop
2.5.2、Spark和Hive。
浏览 4
提问于2016-04-06
得票数 1
4
回答
通过Cygwin在Windows上的错误
Hadoop
:无法找到null\bin\winutils.exe
、
当我设置
HADOOP
_HOME=/cygdrive/c/ecosystem/
hadoop
-2.5.1,然后尝试从Cygwin运行bin/
hadoop
fs或bin/
hadoop
-Streing.jar所以,我设置了
HADOOP
_HOME=c:\ecosystem\
hadoop
-2.5.1,这个错误消失了。但是,现在我在Cygwin中运行时会收到一个链接错误。我通过Windows用
HADOOP
_HOME=c:\
浏览 3
提问于2014-10-02
得票数 5
回答已采纳
4
回答
如何在mapper (
Hadoop
)中使用MATLAB代码?
、
、
、
我想要创建一个使用该代码的
Hadoop
映射
程序
。我遇到了以下解决方案,但不确定哪一种是最好的(因为在
hadoop
中的每个从节点上安装matlab编译器运行时对我来说非常困难): 手动将matlab代码转换为C++中的OpenCV,并从映射器调用它的exe不确定,因为集群在每个节点上都安装了
Linux
,而不是Windows.使用
Hadoop
流。但是
Hadoop
流需要一个可
执行
文件作为映射器,而matlab的可
执行
程序
也需要Matlab编
浏览 0
提问于2012-03-31
得票数 13
回答已采纳
2
回答
如何在
Hadoop
上运行pySpark
、
、
、
我是
Hadoop
世界的新手。我将在我的PC上安装一个独立版本的
Hadoop
,以便将文件保存在HDFS (当然是1个节点)上,然后运行pySpark从HDFS读取文件并对其进行处理。
浏览 0
提问于2017-01-11
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Hadoop Hadoop中的推测执行
Linux Shell 执行原理探究
linux,SSH 远程执行任务或者执行sh文件
Linux定时执行任务Crontab
在linux上定期执行命令、脚本
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
云直播
活动推荐
运营活动
广告
关闭
领券