一共2处地方存放着我们的规则 C:\Windows\System32\drivers\etc 下的hosts文件 远程DNS服务器 我们的系统是先去找本机的hosts文件。...本机hosts文件存放着对应的 IP 域名。远程DNS服务器也是如此。...既然知道了规则,我们就利用规则实现本机域名 去C:\Windows\System32\drivers\etc 用任意的文本编辑器编辑他 # Copyright (c) 1993-2009 Microsoft...Corp. # # This is a sample HOSTS file used by Microsoft TCP/IP for Windows. # # 此文件包含IP地址到主机名的映射。
自动部署?Ambari Ambari 跟 Hadoop 等开源软件一样,也是 Apache Software Foundation 中的一个项目,并且是顶级项目。...Ambari——大数据平台的搭建利器 自动部署脚本 为什么Ambari那么NB却不用呢,其实很想用,毕竟这已经是一个很成熟的软件了,但是不能用或者说是不方便用。...其二就是ambari需要从repo源。但是某些情况下无外网,无内网源自己去部署程序还得先搭建cdh相关的repo源是一件非常麻烦的事情。。。...也能实现集群的部署操作,后面还可以继续修改,支持主机的添加等功能。 主体逻辑:读取集群配置,ssh传输软件包到各个服务器,根据配置生成对的配置文件,ssh传输到各个服务器各个软件对应的目录。...zookeeper": [ "namenode-1", "datanode-1", "datanode-2" ], "hosts
今天完善 ambari 安装部署的初衷,就是帮助更多使用 ambari 的人,所以就又完善了一下这文章,总之,现在这文章已经很细致了。...二、修改主机名和hosts文件 1....修改hosts文件(三台主机的hosts文件均修改为下图所示) # 添加机器ip与主机名映射 vim /etc/hosts ? 三、关闭防火墙和selinux 1....以上就是安装 ambari 的大体步骤。其实都挺简单的,部署步骤不难,完全可以写成自动化脚本来执行,这里我建议使用 ansible 来部署,感兴趣的朋友可以研究下。...在这一步中,可能很多刚入门的朋友还不清楚如何选择。其实和分配 master 的思路一样,就是将哪些组件安装在哪些主机上,这个就看个人规划了。
/etc/hosts 192.168.3.212 192-168-3-212.baicheng.com 192.168.3.133 192-168-3-133.baicheng.com...ntpdate ntp1.aliyun.com 注意: 建议硬盘50G以上 192.168.80.144 ambari01 #部署Ambari-server...和Mirror server 192.168.80.145 ambari02 #部署Agent 192.168.80.146 ambari03 #部署Agent 192.168.80.147... ambari04 #部署Agent 2....enabled=1 priority=1 (3) 移动文件 mv ambari.repo /etc/yum.repos.d/ mv hdp.repo/etc/yum.repos.d
今天就来介绍如何安装Ambari和如何使用Ambari来部署Hadoop集群。 对于HDP集群,ambari是一个极其优秀的管理软件。本文就来介绍,如何使用ambari来部署一个HDP集群。...umask设置 sudo vim /etc/profile umask 0022 source /etc/profile 关闭linux swap vim /etc/sysctl.conf 在最后添加...服务节点,新建配置文件/etc/yum.repos.d/ambari.repo,并填入以下内容: [ambari-2.4.2.0] name=ambari-2.4.2.0 - Updates baseurl...ambari向导界面 部署HDP集群 1、点击上述图片中的Launch install Wizard 2、选择stack 我选择 的是HDP2.2,里面的对应的 Hadoop 版本为 2.6.x 3、指定...4、confirm hosts 也就是安装向目的主机安装ambari agent,一行写一台主机,填写是要主要填写主机主机名,不要填写IP,要不然有可能出现以下错误: ambari agent machine
软件环境 二、修改主机名和hosts文件 1....修改hosts文件 vim /etc/hosts 注:主机名修改后需要重启机器才可彻底生效。.../usr/bin/env bashhost_list=$(sed -n '3,$p' /etc/hosts | awk '{print $1}')master_hostip=$(sed -n 3p /etc.../hosts | awk '{print $1}')ips_no_host=$(sed -n '4,$p' /etc/hosts | awk '{print $1}')# 遍历所有节点for host...启动ambari-server ambari-server start 登陆浏览器访问: http://192.168.162.41:8080/,利用界面部署集群。
文件 4个节点的配置保持同步 # 文件:/etc/hosts # 注意,前两行配置不要删除 127.0.0.1 localhost localhost.localdomain localhost4...and JAVA_HOME must be valid on all hosts....Ambari+HDP大数据平台部署 4.1 部署Ambari集群和HDFS集群 ? ? ? 接着要把滚动条往下拉,把无用的其他操作系统的仓库删掉: ?...新服务部署后,可能会提示重启其他相关服务,重启即可 ? 4.5 部署Kafka ? ? ? ? 4.6 部署Spark2+Sqoop ? ? ? ? ?...至此,Ambari2.7+HDP3.1大数据平台就安装部署完成了!
2、备份 ambari 数据库 一般,我会将 ambari 元数据信息保存在 mysql 中,ambari 数据库中的 hosts 表会存储着所有的主机信息。...5、修改主机名和/etc/hosts文件 hostnamectl set-hostname hdp1.data hostnamectl set-hostname hdp2.data vim /etc/...hosts 10.255.20.139 hdp1.data 10.255.20.198 hdp2.data 需要确保所有 ambari 节点的 /etc/hosts 文件中的主机名都修改成了最新的。...编辑 /etc/ambari-server/conf/ambari.properties ,修改 mysql 连接的主机名信息。 ?...通过ambari 界面,去 hdfs 服务的配置里面搜了一下,发现配置又被更改了,如下图所示: ? 难道和刚才安装部署 knox 或者新服务有关?不知道了,需要大家去尝试了。
我们本篇文章主要讲述如何去同步远程服务器中的Ambari数据源到本地,并将其作为局域网yum安装源。...基本环境信息 --- 由于是通过Ambari数据源安装ambari,我们只需要在一台机器上运行即可,我们这里部署到了和ambari-common(该节点压力较小)节点在一起。...不过在实际的线上环境我们推荐将其分开部署。...p 22 ambari-common需要在本地/etc/hosts文件中配置相应服务器映射,否则无法直接使用登录操作 下载hortonworks官方提供的Amari仓库源 在下载前我们需要检验是否安装wget...和(ambari大版本),(ambari绝对版本) 需要注意的是/etc/yum.repos.d/ambari.repo
现在我们开始着手安装了,安装过程中,我会介绍我遇到的坑,和如何再次爬出来。 1. 首先登陆官方页面 https://docs.hortonworks.com/index.html 2....wget -nv http://public-repo-1.hortonworks.com/ambari/CentOS6/2.x/updates/2.4.2.0/ambari.repo -O /etc/...and JAVA_HOME must be valid on all hosts....这里就要注意/etc/hosts是否都正常解析 18. 安装ambari的agent,如果遇到失败,选择失败的条目,可以“retry” 19....是的,我只部署了zookeeper和HDFS。因为,错了太多次了。我只能尝试从最简单的开始安装。减少出问题的概率。 22.
1.3 linux修改hosts并添加集群主机 #linux环境下,三台服务器均添加 vim /etc/hosts 192.168.8.105 my-hdp1 192.168.8.106 my-hdp2...安装部署httpd服务后,可以通过浏览器访问/var/www/html/下的文件。.../yum.repo.d/ cd /etc/yum.repo.d/ #新建ambari.repo文件 vim ambari.repo #添加以下内容 [ambari] name=ambari...scp ambari.repo root@my-hdp2:/etc/yum.repo.d scp ambari.repo root@my-hdp3:/etc/yum.repo.d #分发HDP.repo...10.6.11 安装部署 ? 安装失败 ?
放弃不难,但坚持很酷~ 声明:博主写了一些Ambari系列文章,可以在历史文章中查看。 一、配置说明 1. 硬件环境 ? 2. 软件环境 ? 二、修改主机名和hosts文件 1....修改hosts文件(三台主机的hosts文件均修改为下图所示) # 添加机器ip与主机名映射 vim /etc/hosts ? 三、关闭防火墙和selinux 1....禁用selinux # 永久性关闭selinux(重启服务器生效) sed -i 's/SELINUX=enforcing/SELINUX =disabled/' /etc/selinux/config...修改配置文件 echo server.jdbc.driver.path=/usr/share/java/mysql-connector-java.jar >> /etc/ambari-server/conf...登陆浏览器访问: http://192.168.162.41:8080/,利用界面部署集群。 ? 默认登陆账号/密码为:admin/admin。
/*.repo root@ slave1:/etc/yum.repos.d/ scp /etc/yum.repos.d/*.repo root@ slave2:/etc/yum.repos.d/ 所有服务器上...and JAVA_HOME must be valid on all hosts....默认端口 vi /etc/ambari-server/conf/ambari.properties 如下 client.api.port=8089 8、(master上)启动ambari服务: ambari-server...中添加配置: hive.users.in.admin.role hive 安装配置部署...选择需要安装的组件(根据自己需要选择) 8、 资源节点分配(合理分配资源) 9、分配各节点需要安装的服务客户端 10、 配置信息、设置密码、集群服务文件路径 可以查看Review模块:下载集群节点服务部署信息
目录: (1).docker部署ambari (2).配置SSH免密登陆 (3).配置ambari基础repo (4).辅助repo配置 (5).创建集群 (6).资源耗费 附录1.ambari相关的yum...repo 附录2.参考文章 (1).docker部署ambari git clone https://github.com/hepyu/docker-ambari-2.7.git (我fork自:git...2.分别在3台虚拟机上编辑 /etc/hosts 文件,添加IP和主机名 (每一台都要加这三行,别忘了加自己) 172.17.0.4 node1 172.17.0.3 node2 172.17.0.2...下一步需要输入ambari-server所在机器的私钥,这样ambari-server才能把组件部署到其他节点: 只能添加node1, node2 因为node3是ambari-server节点,如果添加会报错...Please check hostname, hostname -f and /etc/hosts file to confirm your hostname is setup correctly ?
上篇分享HDP3.1.4对照2.6.x的新特性,本篇文字整体分享下HDP3.1.4+Ambari2.7.4集群部署。各位看官走着~图片?...yum.repos.d]# vim /etc/hosts127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4.../hosts root@{target_host}:/etc/hosts#修改hostname,重连生效[root@master ~]# vi /etc/sysconfig/network # Created...root@nn71 ~]# systemctl disable firewalld4.7挂载CentOSyum源挂载http CentOS7.4 yum源,需安装httpd并挂源(主节点配置,其他节点访问)部署环境无网络环境...拷贝至集群其他Ambari Agent主机(target_hosts):scp ~/.ssh/id_rsa.pub unicom@{target_hosts}:~/?
,可以部署、管理集群,果然是个好东西,所以就拿来用,但是在安装的过程中碰到了许许多多的问题,所以现在把安装过程总结一下,放到这里,以方便下次安装或者其他有对ambari感兴趣的同学可以参考之。 ...安装集群主要分以下几步: 1、安装ambari(参考https://cwiki.apache.org/confluence/display/AMBARI/Install+Ambari+2.2.0+from...+Public+Repositories) cd /etc/apt/sources.list.d sudo wget http://public-repo-1.hortonworks.com/ambari...ambari-server start 可以先设置下一步的root用户,这样不需要sudo 2、启用root用户 sudo passwd root 输入密码 然后 sudo vim /etc/ssh/...添加PermitRootLogin yes 然后重启服务 sudo service ssh restart 3、配置hosts vim /etc/hosts 添加 192.168.1.201 host01
二、安装部署 2.1 主机规划 序号 IP地址 主机名 系统版本 1 172.20.2.222 ambari-server centos7.3 2 172.20.2.203 hadoop-2 centos7.3...3 172.20.2.204 hadoop-3 centos7.3 4 172.20.2.205 hadoop-4 centos7.3 2.2 部署 2.2.1 基础环境部署 a.修改主机名配置hosts.../SELINUX=disable/g' /etc/selinux/config setenforce 0 cat >>/etc/hostshosts解析 172.20.2.222.../ tar -zxvf HDP-2.5.0.0-centos7-rpm.tar.gz -C /var/www/html/hdp/ 配置ambari YUM源 cat >/etc/yum.repos.d/...hdp YUM源 cat >/etc/yum.repos.d/hdp.repo<<EOF #VERSION_NUMBER=2.5.0.0-1245 [HDP-2.5.0.0] name=HDP Version
免密钥登录其他4台节点 ssh-keygen 3)配置主机域名解析 vi /etc/hosts 添加如下行 10.20.90.59 ambari 10.20.90.60 bigdata1 10.20.90.61...5)主机域名解析文件拷贝到4台节点上 scp /etc/hosts root@bigdata1:/etc scp /etc/hosts root@bigdata2:/etc scp /etc/hosts...root@bigdata3:/etc scp /etc/hosts root@bigdata4:/etc 并验证可以正常免密登录 四、配置Ambari HDP以及HDP-UTILS 本地yum源...and JAVA_HOME must be valid on all hosts....,(图误) 九、排错 1、Confirm Hosts时出现安装ambari-agent的报错的解决方法 修改 /etc/ambari-agent/conf/ambari-agent.ini 文件,在
测试环境 1.操作系统版本:CENTOS7.2 2.Ambari 版本:ambari-2.6.1.5 3.HDP 版本:HDP2.6.4 4.采用 root 对集群进行部署 2.前置准备 2.1.hostname...及 hosts配置 ---- 集群中各个节点之间能互相通信使用静态IP 地址。...IP 地址和主机名通过/etc/hosts 配置,主机名/etc/hostname 进行配置。...以 ambari 节点(192.168.0.234)为例: 1.hostname配置,/etc/hostname 文件如下: ip-192-168-0-234 (可左右滑动) 或者你可以通过命令修改立即生效...配置,/etc/hosts文件如下: 127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4 192.168.0.234
实战》,接下来再来聊聊基于Ambari如何禁用Kerberos,可不是在页面上点击禁用Kerberos那么顺利噢,有的时候服务会启动失败啊~ 一、思考 使用Ambari启用Kerberos过程中,都做了哪些操作...“,Ambari就会自动解除Kerberos的控制,如下图所示: 过程中可能会出现“管理会话过期的提示”,如下图所示: 管理主体:填写你自定义创建的Principal。...export ZK_CLASSPATH=/etc/zookeeper/conf/:/usr/hdp/current/zookeeper-server/lib/*:/usr/hdp/current/zookeeper-server...四、总结 使用Ambari禁用Kerberos,不像CDH产品一样,可以进行服务的Zookeeper初始化。...我的做法是:打开Ambari面板上对应服务的配置项,右上角对配置进行搜索,搜索关键词kerberos,将设置为kerberos的相关选项删除或按照Ambari提示进行更改,然后再重启该服务试试,应该就可以成功启动了
领取专属 10元无门槛券
手把手带您无忧上云