我对hadoop和linux都是新手，我是从网上搜索开始的，我安装了virtualbox oracle的最新版本，然后安装了linux mint 16，之后我开始从安装hadoop。
但是当我到了格式化namenode hadoop namenode -format的步骤时，linux显示了消息hadoop: command not found，所以有人能帮上忙吗?我已经尝试了许多解决方案，但都没有效果，谢谢
浏览 4提问于2014-03-29得票数 0
我已经在Windows本地系统上安装了Apache nifi 1.1.1。如何使用本地Windows Box上安装的Apache Nifi实例连接到安装了Hadoop的远程Linux节点？另外，如何使用这些Nifi本地实例在安装了Hadoop的远程Linux节点上执行数据迁移活动？我已经在这些远程Hadoop集群上启用了Kerberos。
浏览 0提问于2017-02-27得票数 0
2回答
我是hadoop的新手，并试图在我的本地机器上安装它。我发现安装hadoop有很多方法，比如安装vmware Horton works，在上面安装hadoop，或者安装Oracle虚拟盒、Cloudera，然后再安装Hadoop。我的问题是，是否必须安装一个运行Hadoop的虚拟盒？换句话说，hadoop是只在Linux操作系统上运行，如Ubuntu、Redhat等，还是我可以直接在Windows上安装hadoop (没有蚂蚁虚拟盒)？
浏览 4提问于2015-06-20得票数 2
回答已采纳
我得到的hadoop环境的特性或功能是否较少。当安装在使用虚拟机器的windows机器上时？对于初学者来说，安装这种hadoop是不是很好？或者hadoop安装在linux机器上和安装在windows机器上的虚拟机器上有什么不同。
浏览 4提问于2015-10-08得票数 0
我正在尝试学习Hadoop，是否可以在linux机器上安装Hadoop并尝试大多数(如果不是全部) Hadoop实用程序？
浏览 2提问于2012-01-29得票数 0
回答已采纳
我是Apache的新手，我正在学习一个视频课程。
因此，我已经在linux虚拟机上正确地安装了Hadoop1.2.1。
安装之后，指导员在shell中执行以下命令：
bin/hadoop jar hadoop-examples-*.jar grep input output 'dfs[a-z.]+'
以确保Hadoop正常工作并正确安装。
但是这个命令到底是什么呢？
浏览 1提问于2016-01-16得票数 1
回答已采纳
如何仅下载hdfs而不是hadoop？我正试图在linux/mac/windows上安装它。我尝试了搜索，但是所有的结果都指向hadoop安装程序，例如
谢谢。
浏览 2提问于2014-11-20得票数 0
回答已采纳
当我试图在eclipse中配置hadoop插件时，我得到了下面的错误。
Error:call to localhost:54310 failed on connection exception:java.net.connectException:Connection refused:no further informaion
Hadoop版本为1.0.4
我已经在Linux上安装了hadoop，并且正在使用Windows运行Eclipse。在hadoop location窗口中，我尝试使用host作为本地主机和linux服务器。
MR Master: Host: localhost and p
浏览 1提问于2013-04-28得票数 1
2回答
我计划用大约5台机器来实现hadoop集群。通过一些背景研究，我了解到为了实现集群，我需要在每台机器上安装hadoop。
早些时候，我计划在每台机器上安装Linux发行版，然后分别安装hadoop，并将每台机器配置为并行工作。
最近我经历了一些Hadoop发行版，比如Cloudera和Hortonworks。我的问题是，是在每台机器上安装诸如Cloudera或Hortonworks之类的发行版，还是像前面描述的那样分别安装hadoop？
使用发行版会使我的任务更容易，还是需要比纯hadoop安装更多的知识来处理它们？
浏览 0提问于2014-04-29得票数 1
回答已采纳
1回答
我已经在本地windows机器上的linux中安装了Hadoop/YARN。在同一台windows机器(不在VM中)上，我已经安装了Spark。在windows上运行spark时，我可以读取HDFS中存储的文件(在linux中)。
val lines = sc.textFile("hdfs://MyIP:9000/Data/sample.txt")
当保存一个用于HDFS saveAsTextFile("hdfs://MyIP:9000/Data/Output")的文件时，我得到以下错误：
org.apache.hadoop.security.AccessCo
浏览 1提问于2018-09-16得票数 0
回答已采纳
1回答
我已经安装了kerberos配置的Apache (2.8.5)。NameNode、DataNode和ResourceManager运行良好，但Nodemanager未能从错误开始：
Can't get group information for hadoop#configured value of yarn.nodemanager.linux-container-executor.group - Success.
文件权限：
container-executor.cfg: -rw------- 1 root hadoop
container-executor: ---Sr-s--- 1
浏览 2提问于2019-06-29得票数 0
回答已采纳
我正在寻找在Arch Linux上安装protobuf 2.5.0，以便在操作系统上安装Protoc-2.5.0，这样我就可以继续从源代码构建Hadoop2.6.0，并使我的生活变得轻松！)
顺便说一句，当hadoop是从源代码构建时，Protobuf2.6.0不编译，我也尝试过这样做。Ubuntu14.04附带了Proc2.5.0。我不想使用Ubuntu。
请先检查屏幕截图(没有Protobuf2.5.0)，因为问题就在那里。我想我得到了下面的例外，我知道protoc目前还没有安装在arch linux中。
错误未能在hadoop-protoc项目上执行目标org.apache.hadoo
浏览 19提问于2015-04-22得票数 14
我安装了Hadoop -0.20.2(单节点)，并在Linux(Centos).I上进行了配置，为Hadoop安装了Eclipse并添加了Eclipse-plugin。我将数据集放在/home/Hadoop/input/ali.txt中。我无法在Eclipse中的Hadoop上运行Wordcount示例。当我选择“在Hadoop上运行”选项时，没有发生什么事情。另外，在Eclipse中作为java应用程序运行Wordcount示例时，会遇到以下错误：
Input path does not exist: file:/home/hadoop/workspace/wordcount/home/ha
浏览 4提问于2015-08-06得票数 0
我试图在Ubuntu12.04上安装hadoop。我遵循了下面的文章。
http://www.michael-noll.com/tutorials/running-hadoop-on-ubuntu-linux-single-node-cluster/
我已经按照本教程中给出的说明安装了hadoop。我已经安装了hadoop-0.23.9.tar.gz，尽管这个站点提到了一个旧版本。它还提到了更新hadoop-env.sh文件。我在/usr/local/hadoop/conf下找不到这个文件。hadoop目录下没有目录“conf”。由于版本更改，该文件可能位于其他地方，但我无法找到它。我想知道这
浏览 0提问于2013-08-02得票数 5
我尝试使用本教程安装hadoop (在出现问题的地方给视频加盖了时间戳)
但是，在格式化namenode(hdfs -format)之后，我无法在/abc中获得“名称”文件夹。此外，start-all.sh和其他/sbin命令也不起作用。
我确实尝试过将hadoop安装为一个不能工作的节点，所以我尝试删除它，将所有的东西都作为一个双节点重新设置，所以我不得不重新格式化namenode。我不知道这是否对此产生了影响。
编辑1:我修正了start-all.sh命令不能工作，因为我纠正了.bashrc中的一个错误。但是，在运行start-all.sh或start-dfs.sh等时，我会得到这些错误消
浏览 2提问于2020-01-19得票数 2
1回答
我正在尝试建立一个使用mahout，hadoop和java的推荐引擎。这是我第一次使用hadoop，我从一个已经安装了hadoop的linux环境的服务器上获取我的数据集。我的开发环境是windows，现在我需要在我的开发环境还是在服务器上安装mahout？如果我需要在我的开发环境中使用mahout，我还需要在其中安装hadoop吗？
浏览 1提问于2013-05-20得票数 2
回答已采纳
我在研究hadoop。我在寻找Windows上的hadoop安装，尽管在任何地方都提到要安装在linux/unix系统上。在windows上配置hadoop时，我面临的问题是Java主路径。由于我的机器上只安装了jre，所以我在环境变量和hadoop-env.cmd文件中提到了相同的路径。当我试图使用任何hadoop命令时，它给了我错误，说Java没有被正确指定。这里是我的Java主路径"C:/Program /Java/jre7 7/bin“，那里没有安装jdk。
请帮助我安装hadoop与我有相同的配置。
注意:由于机器是由我的组织提供的，我无权安装与java相关的软件。默认情况下
浏览 4提问于2015-10-03得票数 0
回答已采纳
3回答
我在Redhat系统上配置了Hadoop，运行良好。但是我想知道安装蜂箱的详细步骤。
我已经引用了下面的，但是找不到有用的。
需要一些关于在Redhat linux中Hadoop之上安装HIVE的帮助。
浏览 0提问于2013-07-24得票数 0
回答已采纳
1回答
嗨，我想学习hadoop，我对hadoop如何与MapReduce框架一起工作有基本的想法。现在我想在我本地的PC上练习，所以我想知道如何在单节点上安装hadoop。我安装了VM Workstation 10，并尝试安装任何Linux操作系统来安装Hadoop，但iam无法将Ubuntu加载到VM ware Workstation中，iam在退出英特尔时出现错误...，Operating not found消息。
谁能给我提供关于如何开始安装Hadoop的步骤。我是否应该使用任何简单的发行版( Cloudera、Hortonworks、MapR).If，然后告诉我如何安装这些发行版。(我甚至尝
浏览 0提问于2014-05-25得票数 2
1回答
我在我的家庭网络中的3台计算机上安装了Hadoop2.7.1，其中1台是64位mac，2台是32位linux。我已经成功地将它们配置为在单节点模式下运行，并设置了SSH授权密钥。我想用我的mac作为主机，linux作为从机。当我在mac上运行启动脚本时，我得到这样的错误
hadoop@10.0.1.100: bash: line 0: cd: /usr/local/Cellar/hadoop/2.7.1/libexec: No such file or directory
10.0.1.100是我的一台linux机器的ip地址，/usr/local/Cellar/hadoop/2.7.1/li
浏览 1提问于2016-01-11得票数 0
0回答
scp报错？
、、
Hadoop分布式集群安装问题解决：linux下scp把master配置好的hadoop文件传到slave节点报No such file or directory错误的解决
浏览 57提问于2022-09-20
我正在研究OpenClassroom，并试图理解Hadoop，但是我在安装它时遇到了一些问题(我在Linux上有点新)：
我已经安装和配置了Hadoop (我已经按照网站的要求更改了文件etc/hadoop/core-site.xml、etc/hadoop/hdfs-site.xml、etc/hadoop/mapred-site.xml和etc/hadoop/yarn-site.xml )。
但在那之后，他们告诉我，为了发射Hadoop，我要这么做：
$ hdfs namenode -format
$ start-dfs.sh
$ start-yarn.sh
但当我这么做的时候，它给了我：
浏览 0提问于2019-02-05得票数 0
我正试着在我的linux机器上使用impala。我的不是cloudera发行版。我单独安装了Hadoop、Hive、HBase和其他组件。
以下是版本
Hadoop - 1.0.4
HBase - 0.94.8
Hive - 0.9.0
Impala - 1.2.3
我使用rpm安装了impala，因为我的是一个redhat linux机器。
在我所做的研究中，我了解到impala只能与Hadoop 2.x一起工作。是真的吗？如果它是正确的，我需要迁移到2.x而不是在1.x上浪费时间。
有人能证实这一点吗？提前谢谢。
浏览 2提问于2014-06-06得票数 1
2回答
文件夹中的流式文件
、、、
我要把流媒体应用从flume转移到kafka。
我需要帮助，因为我刚接触卡夫卡。
我有一台windows机器，在其上，由物联网传感器在特定位置(例如D:/Folder )连续生成CSV文件。
我想把它转移到hadoop集群。
1)在传输日志文件之间是否需要kafka集群/代理，或者是否可以直接从windows机器传输到hadoop linux机器？
2)是否可以在windows和hadoop linux机器上安装kafka，然后将CSV文件直接发布到hadoop机器上创建的kafka topic。
我将在hadoop机器上运行一个消费者？
浏览 4提问于2017-12-26得票数 0
我是Linux和Hadoop的新手。我在Ubuntu20.04中安装了Hadoop-3.2.1，我按照site https://computingforgeeks.com/how-to-install-apache-hadoop-hbase-on-ubuntu/上的步骤操作 当我运行这个命令时，我得到了这个错误： ~$ hadoop version
Error: Could not find or load main class ”-Djava.library.path=.usr.local.hadoop..lib.native”
Caused by: java.lang.ClassNotF
浏览 74提问于2020-10-13得票数 0
回答已采纳
2回答
我是Hadoop新手，在Ubuntu 18.10中第一次设置了我的环境
我下载了jdk-8u101-linux-i586.tar.gz、jre-8u101-linux-i586.tar.gz和``hadoop 2.7.3.tar.gz，并分别在我的自定义位置使用此命令解压缩它们。
tar -xvf jdk-8u101-linux-i586.tar.gz
tar -xvf jre-8u101-linux-i586.tar.gz
tar -xvf hadoop-2.7.3.tar.gz
然后我使用gedit添加了以下信息，从而更新了~/.bashrc文件-
export HADOOP_HOME=/
浏览 0提问于2019-05-08得票数 0
我有一台32位的Windows7机器，我需要安装hadoop并试用它，我检查了Cloudera发行版，它适用于linux，64位处理器的VMWare镜像。如何在32位处理器的Windows7上安装Hadoop？
浏览 1提问于2012-02-07得票数 3
回答已采纳
1回答
我是hadoop的新手，所以我遵循这个在我的计算机上安装一个节点。我的操作系统是Windows 7，所以我安装了cygwin。在教区，我被要求：
尝试以下命令：
$ bin/hadoop
但当我尝试的时候，我得到了这样的回应：
-bash: binhadoop：命令
文件"hadoop“位于目录中，没有更改它。正如我提到的，我是Hadoop和Linux\Cygwin的新手，所以也许我做错了一些琐碎的事情。
谢谢
浏览 4提问于2014-08-09得票数 0
我在Ubuntu上设置了一个单节点集群，并使用了常用的指南。
在我开始格式化HDFS Namenode之前，一切都很顺利
hduser@ubuntu:~$ /usr/local/hadoop/bin/hadoop namenode -format
或
hadoop@ubuntu:~$ <HADOOP_INSTALL>/hadoop/bin/hadoop namenode -format
我找不到运行此命令的正确位置。这很可能是因为我不熟悉Linux。
我在2011年10月17日使用deb安装了Hadoop : release 0.20.205.0
浏览 2提问于2012-04-24得票数 2
回答已采纳
我们可以在同一系统上以伪分布式模式安装不同版本的Hadoop吗？
实际上，我想探索不同版本的hadoop-1.x和hadoop-2.x的特性，我已经在两个运行Linux的不同系统上配置了hadoop-1.x和hadoop-2.x。有没有办法在同一台机器上进行配置？
浏览 2提问于2017-07-25得票数 1
1回答
我已经在Ubuntu 14.04上安装了hadoop。每当我将文件从本地文件系统复制到HDFS时，都会收到以下错误。
我使用这个命令：
/usr/local/hadoop$ bin/hadoop dfs -copyFromLocal /tmp/gutenberg /user/hduser/gutenberg
我遇到的错误是：
/usr/local/hadoop$: No such file or directory
我是Linux环境的新手。我不能理解哪个文件不存在。
浏览 1提问于2015-09-27得票数 0
我既不是linux的专家，也不是hadoop的专家，但我遵循了在分布式模式下安装hadoop的说明(Hortonworks发行版和手册)，当我读到启动集群一节时，我思考了为什么这不能作为服务运行。
有没有人有将hadoop作为linux服务运行的经验？这是个好主意还是坏主意？赞成与反对?有什么提示要这么做吗？
任何帮助都会得到重视。Thx
浏览 1提问于2013-09-02得票数 0
我正在尝试安装Hadoop并运行它。我确信我已经成功地安装了Hadoop并格式化了namenode。但是，当我试图运行start-dfs.sh时，我得到了以下错误：
localhost:启动namenode，登录到/usr/local/hadoop/logs/hadoop-wenruo-namenode-linux.out localhost: /usr/local/hadoop/bin/hdfs: /usr/local/hadoop/usr/lib/jvm/java-8-oracle/bin/java: 304: /usr/local/hadoop/usr/lib/jvm/java-8-o
浏览 4提问于2016-11-27得票数 0
回答已采纳
6回答
我正在检查hadoop的安装情况。我确实创建了环境变量，当我调用printenv时，我确实看到了HADOOP_HOME和PATH变量的打印和更正(home/hadoop和HADOOP_HOME/bin )。
如果我到终端中的home/hadoop并调用ls，我就会看到那里的hadoop文件。如果我试图通过调用hadoop来运行它，它仍然告诉我命令未找到。
在Linux上的第一天，对这个问题可能会有一个愚蠢的答案。
浏览 7提问于2015-04-21得票数 3
回答已采纳
我已经在Ubuntu上安装了Hadoop 2.7.2单节点，我想运行java wordcount程序。jar文件的编译和创建已成功完成，但当我在Hadoop上运行jar文件时，我收到以下消息：
WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
我通过编辑.bashrc文件来设置环境变量：
export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/l
浏览 1提问于2016-05-08得票数 7
在所有关于在linux上安装hadoop的解释中，都提到了诸如: hadoop/etc或hadoop/bin这样的文件夹。但是，在我下载、解压缩并重命名hadoop之后，我的hadoop文件夹包含以下子文件夹：
因此，我的hadoop文件夹不包含文件夹etc和bin
安装指南中提到的其他文件(预计将出现在hadoop/conf中)，如core-sie.xml、hadoop-env.sh、yarn site.xml和mapred-site.xml都存在于一个或另一个子文件夹中，我已经单独访问了这些文件来编辑它们。
但我确信我做错了什么。有没有人能告诉我我哪里做错了？
浏览 3提问于2016-10-15得票数 0
我正在尝试从一个不是hadoop集群一部分的windows机器连接hadoop集群。基本上，我们在linux服务器机器上安装了hadoop。所以没有GUI可用。因此，我们所要做的就是在windows机器上使用hadoop eclipse插件运行eclipse。并试图从windows机器上运行代码。
我无法弄清楚如何从这台窗口机器到hadoop主节点运行map还原程序。
浏览 2提问于2012-10-16得票数 1
我是土卫六的新手，我一直在阅读这个网站上的文档：我真的找不到很多关于安装Titan db的文档，我可以在我的windows 7上安装它，还是需要在运行在Linux上的虚拟机上安装它？
这是我唯一需要开始的下载吗？土卫六0.5.4与Hadoop 2(签名)。？
我是否也需要安装hadoop，还是上面提供的链接也会安装它呢？
浏览 2提问于2015-04-15得票数 2
回答已采纳
我正在寻求帮助，谁可以澄清我的怀疑。我已经设置了5节点集群环境。我已经在linux机器上安装了hadoop。
现在，我需要检查每个machine.How中HDFS分区/用户/hadoop的磁盘空间来检查它。
在哪个分区中，逻辑volume..Physicallly这个hdfs /user/hadoop分区被分配。
是否可以在集群机器中执行cd /user/hadoop操作。
浏览 3提问于2014-02-20得票数 0
我是学习HADOOP的初学者。我有一台windows笔记本电脑，硬盘被分成4个驱动器。我最近清空了一个驱动器(D驱动器)，并在其上安装了Ubuntu14.04，并安装了HADOOP和HIVE。现在，当我试图通过linux在HADOOP上工作时，我面临着空间限制。
LINUX安装在D驱动器上，Windows安装在C驱动器中。当我想将本地文件系统中的数据移动到蜂箱中时，我必须先将其复制到HDFS中，然后再复制到蜂箱中，现在我的问题是，在这方面，我的计算机上的其他两个驱动器在这方面是否有任何用处，要么作为本地文件系统，要么作为HDFS，最重要的是作为HDFS。如果是，请告诉我怎么做。任何帮助都是非常
浏览 0提问于2015-04-20得票数 1
回答已采纳
有没有在本地运行Hadoop作业和在远程集群上运行Hadoop作业之间进行切换的简单方法？我更喜欢在本地进行所有开发，并通过命令行运行，更改参数或环境变量以在本地运行或在远程集群上运行之间切换。
对于上下文，我有一个安装了Hadoop的Linux虚拟机。我是Hadoop的新手，但可以在那里运行本地作业。
相关问题:对于Hadoop配置，有哪些好的文档可用？
浏览 0提问于2015-05-18得票数 0
1回答
请帮助我在hadoop linux服务器上安装SYBASE IQ网络客户端，因为我需要它连接到SYBASE IQ数据库。我找不到在linux上安装客户端的确切步骤。如果可能，请与下载链接共享文档。
任何帮助都将不胜感激。
浏览 0提问于2016-04-13得票数 0
在伪分布式模式下安装hadoop时，我最初得到以下错误
Starting namenodes on [localhost]
localhost: namenode running as process 20678. Stop it first.
localhost: datanode running as process 20831. Stop it first.
Starting secondary namenodes [0.0.0.0]
The authenticity of host '0.0.0.0 (0.0.0.0)' can't be established
浏览 1提问于2018-04-30得票数 0
2回答
我现在正在我的linux上安装hadoop，到目前为止我已经安装并提取了hadoop，并设置了我的Java变量。我正在尝试禁用我的ipv6，但到目前为止，当我试图保存更改时，它显示如下：
这是我的命令：
nano /etcl.systct.conf
这个命令能起作用吗？
error writing /etc/sysct.conf: permission denied
浏览 5提问于2017-04-09得票数 0
回答已采纳
3回答
配置单元与mysql的集成
、、、、
我已经在Hbase上安装了hadoop的配置单元，我将数据库驱动程序的配置从derby更改为MySQL，但是我得到了这个异常
FAILED: Error in metadata: javax.jdo.JDOFatalDataStoreException: Access denied for user 'DBAUSER'@'linux-96' (using password: YES)
NestedThrowables：
java.sql.SQLException: Access denied for user 'DBAUSER'@'l
浏览 2提问于2012-12-20得票数 2
回答已采纳
我在linux机器上安装了伪分布式Hadoop。我用eclipse做了几个例子，它也安装在那台linux机器上，它们工作得很好。现在，我想通过eclipse (安装在windows机器上)执行MapReduce作业，并访问已经存在于我的linux机器上的HDFS。我写了下面的驱动代码：
import org.apache.hadoop.conf.Configured;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapred.FileInputFor
浏览 2提问于2015-09-29得票数 0
我想在Linux上安装SQLServer2019，或者安装一个完整的Linux服务器(Ubuntu18.04)，或者安装在带有Polybase的Docker容器上。在Linux服务器或容器上安装MSSQL 2019相对容易。这是我搞不懂的多基位。
使用此Microsoft站点的说明：https://learn.microsoft.com/en-us/sql/relational-databases/polybase/polybase-linux-setup?view=sql-server-ver15
有一个在Ubuntu上安装Polybase的参考，这应该适用于这两种情况(服务器或容器)。当我
浏览 0提问于2021-03-09得票数 0
我正在从eclipse下的windows机器(客户端)执行远程作业，我澄清说我的windows客户端上没有任何hadoop安装，我也不需要，我正在远程执行hadoop作业，hadoop安装在linux机器上。一切都被正确执行，但我想摆脱这个错误：
14/09/22 11:49:49 ERROR util.Shell: Failed to locate the winutils binary in the hadoop binary path
java.io.IOException: Could not locate executable null\bin\winutils.exe in the
浏览 0提问于2014-09-24得票数 1
我安装了hadoop，我的HBase在它上面运行。我在hadoop中的所有守护进程都已启动并运行。在我启动hbase之后，当我发出JPS命令时，我可以看到HMaster正在运行。
我在伪分布式模式下运行我的hadoop。当我检查我的localhost时，它显示regionserver正在运行。
但是为什么我在Linux下的终端上看不到HRegionServer呢？
浏览 2提问于2013-01-23得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
