前往小程序,Get更优阅读体验!
立即前往
发布
社区首页 >专栏 >hadoop伪分布式搭建02

hadoop伪分布式搭建02

作者头像
Dlimeng
发布2023-06-27 16:05:45
发布2023-06-27 16:05:45
2260
举报
文章被收录于专栏:开源心路开源心路

承接hadoop伪分布式搭建01

3.安装Hadoop

 版本 hadoop-2.4.1 3.1上传hadoop安装包 3.2解压hadoop安装包   mkdir /cloud   #解压到/cloud/目录下   tar -zxvf hadoop-2.2.0.tar.gz -C /cloud/

文件夹内容 bin:可执行的脚本

include和libexec:本地库的头文件

sbin:启动和停止相关

etc:配置文件

lib:存放本地库

share:java 用的jar

3.3修改配置文件(5个)   第一个:hadoop-env.sh  在vim hadoop-env.sh 中

:echo $JAVA_HOME  确定后,复制java路径    export JAVA_HOME=复制java路径  第二个:core-site.xml    fs.defaultFS    hdfs://itcast01:9000    hadoop.tmp.dir    /itcast/hadoop-2.4.1/tmp 第三个:hdfs-site.xml    dfs.replication    1

第四个:mapred-site.xml (mv mapred-site.xml.template mapred-site.xml)   mv mapred-site.xml.template mapred-site.xml   vim mapred-site.xml    mapreduce.framework.name    yarn  第五个:yarn-site.xml    yarn.resourcemanager.hostname    itcast01    yarn.nodemanager.aux-services    mapreduce_shuffle

3.2将hadoop添加到环境变量    vim /etc/proflie   export JAVA_HOME=/usr/java/jdk1.7.0_65   export HADOOP_HOME=/itcast/hadoop-2.4.1   export PATH=PATH:JAVA_HOME/bin:HADOOP_HOME/bin:HADOOP_HOME/sbin

#刷新配置

 source /etc/profile

3.3格式化namenode(是对namenode进行初始化)   hdfs namenode -format  或者

  hadoop namenode -format(过时了)

tmp :保存运行时重要的文件

未完待续!------------------------------------------------------------------------

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2016-10-01,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档