承接hadoop伪分布式搭建01
3.安装Hadoop
版本 hadoop-2.4.1 3.1上传hadoop安装包 3.2解压hadoop安装包 mkdir /cloud #解压到/cloud/目录下 tar -zxvf hadoop-2.2.0.tar.gz -C /cloud/
文件夹内容 bin:可执行的脚本
include和libexec:本地库的头文件
sbin:启动和停止相关
etc:配置文件
lib:存放本地库
share:java 用的jar
3.3修改配置文件(5个) 第一个:hadoop-env.sh 在vim hadoop-env.sh 中
:echo $JAVA_HOME 确定后,复制java路径 export JAVA_HOME=复制java路径 第二个:core-site.xml fs.defaultFS hdfs://itcast01:9000 hadoop.tmp.dir /itcast/hadoop-2.4.1/tmp 第三个:hdfs-site.xml dfs.replication 1
第四个:mapred-site.xml (mv mapred-site.xml.template mapred-site.xml) mv mapred-site.xml.template mapred-site.xml vim mapred-site.xml mapreduce.framework.name yarn 第五个:yarn-site.xml yarn.resourcemanager.hostname itcast01 yarn.nodemanager.aux-services mapreduce_shuffle
3.2将hadoop添加到环境变量 vim /etc/proflie export JAVA_HOME=/usr/java/jdk1.7.0_65 export HADOOP_HOME=/itcast/hadoop-2.4.1 export PATH=PATH:JAVA_HOME/bin:HADOOP_HOME/bin:HADOOP_HOME/sbin
#刷新配置
source /etc/profile
3.3格式化namenode(是对namenode进行初始化) hdfs namenode -format 或者
hadoop namenode -format(过时了)
tmp :保存运行时重要的文件
未完待续!------------------------------------------------------------------------