首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

为什么不是所有来自ambari集群的参数都不是由blueprint json文件表示的

ambari集群是一个用于管理和监控Hadoop集群的开源工具。它允许用户通过图形界面或API来管理集群的配置和部署。

在ambari集群中,参数可以通过多种方式进行配置和管理。其中一种方式是使用blueprint json文件来表示集群的配置信息。blueprint是一个描述集群拓扑和配置的模板文件,它定义了集群中各个组件的配置参数和关系。

然而,并不是所有来自ambari集群的参数都可以由blueprint json文件表示。这是因为ambari集群的配置参数非常丰富和复杂,涉及到各种组件和服务的配置。有些参数可能是动态生成的,需要根据集群的实际情况来确定。此外,一些参数可能是特定组件或服务的私有参数,无法通过blueprint来表示。

因此,虽然blueprint json文件可以帮助我们管理和配置集群的大部分参数,但并不是所有参数都可以由它来表示。在实际使用中,我们可能需要通过其他方式来配置和管理那些无法由blueprint表示的参数,例如使用ambari的图形界面或API进行手动配置。

总结起来,不是所有来自ambari集群的参数都可以由blueprint json文件表示,这是因为集群的配置参数非常丰富和复杂,有些参数是动态生成的,有些是特定组件或服务的私有参数。在实际使用中,我们需要综合使用blueprint和其他方式来管理和配置集群的参数。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

  • 在 Docker 上建立多节点 Hadoop 集群

    在上篇文章中你已经看到了在你devbox创建一个单点Hadoop 集群是多么简单。 现在我们提高门槛,在Docker上创建一个多点hadoop集群。...有了这些功能,创建3个节点hadoop簇,只需要下面一行代码搞定: curl -Lo .amb j.mp/docker-ambari && . .amb && amb-deploy-cluster 默认参数值都是可以根据需要更改...,像是blueprint,簇大小,等等 … 在shellj.mp/docker-ambari功能函数文件参数列表....ambari-agent start连接到服务器 运行AmbariShell 以及其终端控制台 (监控子进程) AmbariShell 会把内置多节点blueprint发送至 /api/v1...list blueprint add --url https://gist.githubusercontent.com/lalyos/xxx/raw/custum-blueprint.json cluster

    1K10

    大数据平台:Ambari集群管理

    除了Hadoop集群,基于可扩展配置文件,用户可扩展自定义组件部署和运行管理。Ambari 提供了一个易于使用Web UI和API,使得系统管理员可以对集群进行监控、配置和管理。...Ambari 提供主要功能包括: 集群安装和配置: 提供向导式界面来帮助用户在集群中安装Hadoop相关服务,如HDFS、MapReduce、Hive、Pig、HBase等,并且可以配置这些服务参数...,用户可以轻松地查看集群状态和性能指标,执行管理任务,以及查看各种服务日志 自动化操作: Ambari 支持创建工作流来自动化常见集群维护任务 Ambari 具备特点: 简易化:对于集群管理员操作友好...,声明脚本、模板文件参数信息,解析command-{id}.json 文件,常用配置模板项 hostLevelParams:系统参数 roleParams:组件参数 configurations:服务配置信息...#createResources 根据请求参数创建对应资源 常用Type类型和Provider如下: Resource.Type ResourceProvider 描述 Blueprint BlueprintResourceProvider

    65275

    (内部资料)Ambari 自定义服务第八讲:添加自定义告警

    参考资料: https://cwiki.apache.org/confluence/display/AMBARI/Alerts 1、Ambari 中 alert 概述 Ambari 为了帮助用户鉴别以及定位集群问题...在 Ambari 中预告了很多告警,这些告警被用来监测集群各个模块以及机器状态。对于告警来说,主要有两个概念,一个是 Alert Definition,一个是 Alert Instance。...alert.json 文件依赖于 metainfo.xml 文件。其中 ① 为 service.name 值,② 为 component.name 值,表示定义该组件下告警。...即代表 elastic-config.xml 文件 elasticsearch_port 参数值。 default_port:监测告警默认端口号。如果 uri 参数失效,就会读取该参数。...在 alerts.json 文件中,可以定义多个组件告警信息。

    2.1K30

    hadoop生态系统到底谁最强?

    你能想到一种技术可以在后端做到所有这一切吗? RDBMS可以做到这一切吗?不,这么多用户总数据集收纳了这么多信息,甚至不是RDBMS可以接触到。...这些分析结果以及其他信息(配置文件)可以使用HBase存储(提供快速随机访问)。甚至RDBMS都不是无用所有支付网关仍然使用RDBMS高一致性和可用性。 所以技术也在教我们团队合作才会赢。...AmbariAmbari是一个基于网络集合部署、管理和监视Apache Hadoop集群工具。...它发展Hortonworoks工程师领导,包括Ambari在内Hortonworks数据平台。 Mahout:Mahout是一个数据挖掘库。...它允许Hadoop集群所有数据统一视图,并允许多种工具(包括Pig和Hive)处理任何数据元素,而无需在物理层次上知道数据存储在集群哪里。

    87740

    将数据迁移到CDP 私有云基础数据迁移用例

    该工具将CDH集群Hive/Impala和Kafka RBAC Sentry权限导出为JSON文件,然后在CDP私有云Base 7集群中将其转换并摄取到Ranger中。...如果路径不是/user/java/default/bin/java,请编辑authz_export.sh脚本,将 Sentry 服务器使用路径添加到JAVA_HOME属性,然后保存文件。...要获取/opt/backup/permissions.json文件权限 ,请执行以下步骤: 在目标集群中,将/opt/backup/permissions.json文件复制 到 /user/sentry...重启以下服务: 陈旧服务,如果有的话。 Ambari 服务器 集群每个主机上 Ambari 代理。 在yarn.admin.acl文件中,添加hdfs。...[realms]部分 - 添加 DRS 和 DRT 领域、来自集群 Kerberos KDC、admin_server 和 default_domain 设置 DRS。

    1.6K20

    Ambari?自动部署Hadoop集群

    它帮助我们更好去管理Hadoop集群相关服务,也支持一些扩展,可以让我们去定制一些服务。 你是不是为了配置hadoop集群伤透了脑筋?为了集群添加机器而头痛。...Ambari GUI,方便用户了解到集群各种状态,并进行相应维护。...Ambari详细介绍及相关信息可以浏览下面的网址,虽然他很NB,但是不是我们今天重点!...Ambari——大数据平台搭建利器 自动部署脚本 为什么Ambari那么NB却不用呢,其实很想用,毕竟这已经是一个很成熟软件了,但是不能用或者说是不方便用。...也能实现集群部署操作,后面还可以继续修改,支持主机添加等功能。 主体逻辑:读取集群配置,ssh传输软件包到各个服务器,根据配置生成对配置文件,ssh传输到各个服务器各个软件对应目录。

    1.1K30

    solr基本概念

    开发环境说明: ambari v2.6.1 Solr v5.5.5 笔者使用ambari来自动化安装Solr ---- 一、什么是Solr,及其主要特点 其实简单说,Solr是一个基于Apache...Lucene 项目的开源企业级搜索平台,是用JAVA编写、运行在Servlet容器中一个独立全文搜索服务器(换句话说就是个JAVA-WEB APP),并具有类似RESTHTTP/XML和JSON...二、Solr目录结构 以使用ambari安装solr为例,源码路径: /usr/lib/ambari-infra-solr ?...SolrCloud允许客户端用户通过Collection名称引用它,这样用户不需要关心分布式检索时需要使用和Shard相关参数。 4....最小需要包括solrconfig.xml和schema.xml,除此之外,依据这两个文件配置内容,可能还需要包含其它文件,如中文索引需要词库文件

    1.5K10

    HAWQ技术解析(九) —— 外部数据

    一、安装配置PXF         如果使用Ambari安装管理HAWQ集群,那么不需要执行任何手工命令行安装步骤,从Ambari web接口就可以安装所有需要PXF插件。...注意,手工配置需要修改所有集群主机上相关配置文件,然后重启所有节点上PXF服务。...在使用PXF访问HDFS文件前,确认已经在集群所有节点上安装了PXF HDFS插件(Ambari会自动安装),并授予了HAWQ用户(典型是gpadmin)对HDFS文件相应读写权限。 1....在使用PXF访问JSON文件前,确认满足以下前提条件: 已经在集群所有节点上安装了HDFS插件(Ambari会自动安装)。 已经在集群所有节点上安装了JSON插件(Ambari会自动安装)。...在使用PXF向HDFS文件写数据前,确认已经在集群所有节点上安装了PXF HDFS插件(Ambari会自动安装),并授予了HAWQ用户(典型是gpadmin)对HDFS文件相应读写权限。 1.

    3.3K100

    Hadoop集群监控工具Ambari安装

    Oozie Apache Pig Apache Sqoop Apache Templeton Apache Zookeeper ambari可以使安装hadoop集群,管理hadoop集群服务,监控集群都很容易...安装ambari前需要做步骤 将需要安装hadoop集群按照namenode,datanode进行划分,namenode节点作为ambari master节点,其他节点作为ambari slave。...master主节点中安装puppet php等模块 $ sudo yum install php-pecl-json  # version 1.2.1 compatible with php-5.1.../hmc/html/  地址开始安装hadoop 集群 安装集群需要ambari master 节点中root 用户SSH Private Key File ,路径在/root/.ssh/id_rsa...然后将所需要安装slaves 节点所有hostname 每行一个进行分割存为文件 在页面中都选择好文件后,即可进行安装,在安装服务过程中需要等一段时间,因为所需要hadoop 都是通过yum 进行下载安装

    82420

    docker-9:使用ambari-2.7.3部署大数据集群—两节点demo

    目录: (1).docker部署ambari (2).配置SSH免密登陆 (3).配置ambari基础repo (4).辅助repo配置 (5).创建集群 (6).资源耗费 附录1.ambari相关yum...此时你可以发现在 /root/.ssh/ 文件夹下生成了id_rsa(私钥) 、 id_rsa.pub (公钥),这是生成秘钥对。...4.公钥分享 同步公钥到所有节点需要输入root密码,3个节点都设置root密码为123456 sudo passwd 把自己公钥发送给其它节点,包括自己。...(6).耗费资源 我个人有一台8核32G阿里云ECS,部署完本文2节点集群资源情况: ? 虽然我还装了k8s和istio,但是大数据必然是占大头: ?...附录1.ambari相关yum repo hdp不同版本yum仓库url地址: http://public-repo-1.hortonworks.com/HDP/hdp_urlinfo.json

    1.7K20
    领券