HDSF集群扩容

云缓缓知我意

发布于 2021-04-15 15:06:42

3310

文章被收录于专栏：kafka。kafka。

A: 准备一个全新的节点（新节点准备）

1、关闭防火墙 2、关闭selinux 3、修改主机名 4、主机名与IP的对应关系 5、SSH免密码登录 6、安装JDK

B: 添加到集群

1、创建HDFS的Datanode的白名单 touch dfs.hosts 2 、修改hdfs-site.xml,将白名单添加到配置文件中 dfs.hosts /export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoop/dfs.hosts 3、刷新节点 HDFS 刷新 hdfs dfsadmin -refreshNodes YARN 刷新 yarn rmadmin -refreshNodes 4、将新节点的主机名添加到slaves文件中 5、启动新结点上的DataNode NodeManager sbin/hadoop-daemon.sh start datanode sbin/yarn-daemon.sh start nodemanager 6、web 查看 7、数据负载均衡 ./start-balancer.sh

本文参与腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。

原始发表：2019/11/20 ，如有侵权请联系 cloudcommunity@tencent.com 删除

hadoop