2024年10月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Flume 监控 | EMR on CVM 丰富 Flume 服务角色进程信息、Dashboard 监控及实时 GC 日志 | 2024-10-18 | |
事件 | 1. EMR on CVM & EMR on TKE 事件记录支持按照事件记录内容检索 2. EMR on CVM 丰富 YARN application 运行时长、被拉黑的 NodeManager以及 Yarn 开启洞察相关事件项 | 2024-10-18 | |
日志 | EMR on CVM 实时日志支持查看 GC 日志路径，实时日志查看路径升级优化； | 2024-10-18 | - |
监控指标 | 1. EMR on CVM 丰富节点网络 TCP6 链接状态等相关指标 2. EMR on CVM 丰富 HDFS、Spark HistoryServer 文件描述符数以及 Kudu Server 进程内存相关指标 | 2024-10-18 |
2024年09月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
StarRocks 集群支持统一权限认证 | EMR on CVM StarRocks 集群类型下新增 OpenLDAP 用户认证和 Ranger 权限管控 | 2024-9-30 | |
EMR on TKE 新增StarRocks 组件 | EMR on TKE 在 EMR-TKE-V1.1.0 及以上版本支持 StarRocks 组件 | 2024-9-21 | |
自动伸缩 | EMR on TKE 支持 Trino 和 RSS 的 Worker 角色支持自动伸缩 | 2024-9-21 | |
事件 | EMR on CVM 丰富 App 查询元数据加速桶单桶带宽、请求频率等相关事件项 | 2024-9-4 | |
应用洞察 | 1. EMR on CVM 丰富 Spark 查询洞察总览 2. EMR on CVM 丰富 TrinoSQL 查询大表扫描等洞察能力 | 2024-9-2 | |
存储洞察 | 1. EMR on CVM 存储丰富 HDFS 和 COS 融合桶存储的大小空文件、冷热数据洞察功能 2. EMR on CVM 基于 Hive 元数据新增小文件表、冷数据表、大文件表及小文件分析等文件表的分析洞察功能 | 2024-9-2 | |
事件 | EMR on CVM 丰富 App 维度物理 CPU、内存、IO 资源的事件项告警能力 | 2024-9-2 | |
日志 | EMR on CVM 支持控制台日志投递到 CLS 云产品 | 2024-9-2 | - |
2024年08月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
YARN 资源调度 | 1. 容量调度支持计划模式 2. 优化调度器切换交互及标签调度开关路径 3. 优化部署生效逻辑步骤；明确展示待生效数量提示及内容对比 4. 公平调度策略下需支持制定资源比例，标签调度支持展示各标签中的节点信息及总量信息 | 2024-8-30 | |
托管节点 | EMR on CVM 推出全新资源类型托管节点（简：MNode） | 2024-8-30 | |
新增 StarRocks 版本 EMR-STARROCKS-V2.1.1 | EMR on CVM 新增 StarRocks 标准发行版 EMR-STARROCKS-V2.1.1，支持存算分离部署场景 | 2024-8-9 |
2024年07月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
EMR on CVM 管理LADP 认证 | 控制台支持Hive和Impala组件开启或关闭 LDAP 认证， | 2024-7-10 | |
EMR on CVM Trino支持高可用 | Trino HA 通过 keepalived 和高可用虚拟 IP（HAVIP）实现。 | 2024-7-10 | |
EMR on CVM 火焰图 | 节点控制台支持查询获取进程火焰图 | 2024-7-2 |
2024年06月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
EMR on CVM
服务监控丰富 | 1. 丰富集群内存加权、磁盘加权使用率 2. HDFS Namenode rpc、Yarn 队列、StarRocks Be磁盘状态等相关指标 | 2024-6-26 | |
EMR on CVM事件项丰富 | 1. 新增 CVM 节点内存 Oom、节点磁盘只读、Ping 不可达等12项事件告警 2. 丰富 Hive SQL 编译超时、Impala Query 作业 Create 状态相关等事件项 | 2024-6-26 | |
EMR on TKE 控制台功能丰富 | 1. 集群新建及新增组件时支持 Hive 和 Spark 服务自定义镜像 2. 丰富服务销毁及角色停止功能 | 2024-6-10 | |
EMR on TKE 监控丰富 | 1. 丰富 RSS 服务的监控 Dashboard 及指标告警 2. 丰富集群及部分组件事件项，可事件告警 | 2024-6-10 | |
新增 EMR on TKE版本 | 发布 EMR on TKE V1.1.0版本，新版本丰富 cosranger 组件 | 2024-6-10 |
2024年05月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 StarRocks 版本 EMR-STARROCKS-V2.1.0 | EMR on CVM 新增 StarRocks 标准发行版 EMR-STARROCKS-V2.1.0 | 2024-5-28 | |
EMR on TKE 支持计算资源购买 | 新增计算资源联动购买并支持 EMR on TKE 集群关联使用资源 | 2024-5-28 | -- |
StarRocks 查询拓扑 | EMR on CVM StarRocks 集群（StarRocks V3.1.8及以上）查询支持 DAG 拓扑 | 2024-5-28 | |
Spark 查询洞察 | EMR on CMV 新增 Spark 多种维度的指标分析查询管理并支持多种 Spark 洞察项 | 2024-05-11 | |
应用洞察 | 1. EMR on CVM 新增 Hive 总览洞察统计，支持调度-查询维度的洞察、资源优化建议 2. EMR on CVM 开放 Hive 及 Yarn 引擎的洞察规则模板并可按需调配 | 2024-05-11 | |
HDFS 服务文件 | EMR on CVM HDFS 文件信息支持配置周期定时导出 | 2024-05-11 | |
Trino 查询管理 | 1. Trino 查询支持 Error 日志查看 2. Trino 查询列表优化时间排序 | 2024-05-11 | - |
Impala 查询管理 | EMR on CVM Impala 查询管理丰富总 FragmentInstances、剩余FragmentInstances、Backend 数等维度 | 2024-05-11 | - |
SR 数据表管理 | EMR on CVM StarRocks 库表管理-数据表增加表模式信息并支持筛选 | 2024-05-11 | - |
Hive 查询洞察 | EMR on CVM 丰富 Hive 洞察项输入小文件过多、读数据卡顿、空输入空输出等 | 2024-05-11 | - |
2024年04月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 hadoop 集群版本 EMR-V3.6.1（Beta） | Hadoop 集群类型新增 Beta 版本 EMR- V3.6.1，支持 Spark Native Engine | 2024-04-28 | |
自动伸缩支持跨可用区扩容 | EMR on CVM 自动伸缩支持跨可用区扩容弹性节点 | 2024-04-09 | |
服务托管丰富 | 1. EMR on CVM 新增 Filebeat、Flume、Knox 服务和配置托管 2. EMR on CVM 新增 HBase REST Server 服务托管 | 2024-04-09 | - |
操作日志体验优化 | EMR on CVM 操作日志新增搜索功能，支持按时间、操作、操作详情和操作者搜索，及操作对象、安全级别筛选 | 2024-04-09 |
2024年03月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
EMR on CVM 新增服务监控 | 新增 Goosefs 服务 Cluster、Master、Worker 基础监控指标 | 2024-03-22 | |
EMR on CVM 服务监控丰富 | 1. 丰富 Trino 的队列及 Query 相关监控指标 2. 丰富 Alluxio 服务 Cluster 数据读写相关监控指标 3. 丰富 HDFS 正在写入文件数，优化 NameNode RPC 指标 4. StarRocks 服务元数据，Query/Update，BE 资源、执行线程等指标支持告警 5. 优化 Impala 服务扩容角色支持角色监控指标 | 2024-03-22 | |
集群事件 | EMR on CVM 丰富进程 OOMKiller kill 事件并支持告警 | 2024-03-22 | |
集群日志 | 1. EMR on CVM 支持 Spark SQL 审计日志筛选及导出 2. EMR on CVM 270&280版本的 Trino 日志优化按角色拆分采集 | 2024-03-22 | |
交互优化 | EMR on CVM 优化 Hbase/Kudu 数据表管理页面交互 | 2024-03-22 | - |
新增 hadoop 集群版本 EMR-V2.8.0 | 新增 Hadoop3.x 标准发行版 EMR-V2.6.0，支持 Spark3.3.4、Trino435、Flink1.16.1、Iceberg1.4.3、 Hudi0.14.1、Kyuubi1.7.1 | 2024-03-08 |
2024年01月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Trino 服务应用丰富 | EMR on CVM 新增 Trino 的多维度查询管理功能 | 2024-01-30 | |
Yarn 洞察项丰富 | Yarn 丰富同源调度 Stage 耗时异常、Resource 开销异常洞察项 | 2024-01-30 | |
StarRocks 服务应用丰富 | 1. 新增数据库表天级统计、库表分区多维列表 2. 新增服务导出任务管理 | 2024-01-30 | |
事件项丰富 | EMR on CVM 丰富 HDFS 小文件占比事件项 | 2024-01-30 | |
HDFS 文件分析优化 | HDFS 文件分析范围按照配置路径范围分析展示 | 2024-01-30 | |
Impala 丰富热点表 | Impala 查询管理支持热点数据表 Top 及热点数据表趋势视图 | 2024-01-30 | |
场景化配置参数调参及规格推荐优化 | EMR on CVM Hadoop 集群类型不同应用场景，根据所选组件及组件数量，推荐合理机型规格及配置调参优化。 | 2024-01-17 | - |
任务中心体验优化 | 任务中心检索条件丰富、支持节点维度指令聚合展示，实时刷新任务进度与集群状态一致。 | 2024-01-17 | |
扩缩容操作支持任务流程并发 | EMR on CVM 当集群在扩容或缩容时，支持对集群非操作对象节点进行其他任务操作，例如：扩容时，支持对另一个节点进行缩容或服务重启等操作。 | 2024-01-17 | - |
自动伸缩支持伸缩组类型 | EMR on CVM 自动伸缩支持新的伸缩组类型，伸缩组支持队列维度设置伸缩策略。 | 2024-01-17 | |
支持服务自定义部署 | EMR on CVM Hadoop 默认场景下，支持部分非必选组件在已部署情况下，控制台支持卸载；以及新增组件时支持服务自定义部署，也支持角色维度的添加及卸载。 | 2024-01-17 | |
导出软件配置支持维度和范围选择 | EMR on CVM 导出软件配置支持导出维度和导出范围选择，丰富导出文件适用场景。 | 2024-01-17 | |
操作日志优化 | EMR on CVM 完善操作日志详情，丰富内容，帮助用户快速排障定位问题。 | 2024-01-17 | |
支持挂载云硬盘 | EMR on CVM 控制台支持云数据盘额外挂载及磁盘初始化的能力。 | 2024-01-17 | |
控制台节点运维 | EMR on CVM 节点进程支持查看实时日志、可获取 Thread Dump 信息。 | 2024-01-17 | |
StarRocks 指标 | StarRocks 服务丰富 BE 主键、Meta 等相关指标34个，FE指标2个并修正已有 GC 时间指标单位为 ms（原单位为秒） | 2024-01-17 | |
HBase Thrift 指标 | EMR on CVM 新增 Hbase Thrift 角色监控，丰富 JVM、JMX 等相关指标31个 | 2024-01-17 | |
概览-节点对比优化 | EMR on CVM 集群概览节点监控对比功能升级，增加节点类型选项并支持单次对比20节点 | 2024-01-17 | |
事件项丰富 | 新增 YARN 当前不健康的 NodeManager 数量事件项 | 2024-01-17 | |
其他 | 腾讯云可观测平台 > 弹性 MapReduce（动态）指标告警丰富 ALLUXIO、ZEPPELIN、KUDU、DORIS、KYLIN、STORM、OOZIE 等服务 | 2024-01-17 | - |
2023年11月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
TKE 版本发布 | 发布 EMR-TKEV1.0.1版本、EMR-TKE-DLC V1.0.0版本 | 2023-11-17 | |
TKE 开放地域 | EMR on TKE 上线新加坡 | 2023-11-17 | - |
TKE POD 运维丰富 | EMR on TKE POD 重建功能可将增加配置项下发生效，同时支持 POD 销毁 | 2023-11-17 | |
配置关联功能丰富 | EMR on CVM 扩容 TKE 节点时，自定义参数支持容忍 EMR on TKE HiveMetaStore 支持 DLC 地址关联 | 2023-11-17 | - |
元数据库接口升级 | EMR on TKE&CVM 优化 Hive元数据库接口，仅加载已部署 MetaDB的CDB | 2023-11-17 | - |
TKE 支持任务中心 | EMR on TKE 新增集群内容任务中心功能 | 2023-11-17 | - |
访问 COS 调整 | EMR on TKE 访问 COS 读写权限使用“服务相关角色” | 2023-11-17 | - |
2023年10月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Kyuubi 服务应用丰富 | EMR on CVM 新增 Kyuubi 查询管理及查询详情 | 2023-10-30 | |
Hive 服务应用丰富 | EMR on CVM Hive 查询支持多项洞察、丰富查询表及扫描相关信息维度 EMR on CVM Hive 查询管理新增洞察项视角洞察总览功能，可观测分布趋势及洞察项列表 | 2023-10-30 | |
角色日志丰富 | EMR on CVM 丰富 Yarn 服务 Timeline Server 日志 | 2023-10-13 | |
服务指标丰富 | EMR on CVM 丰富节点单盘指标、OpenLdap 心跳、Yarn 队列内存使用率、Kyuubi、Hbase RS、Timeline Server 等共48个监控指标 | 2023-10-13 | |
事件项丰富 | EMR on CVM 新增 Yarn RM 无 Active 状态、HDFS NN 长时间未做 Checkpoint、Yarn Application 作业运行失败事件项，修复进程缺失事件中缩容节点误报 | 2023-10-13 | |
其他 | EMR 上报腾讯云可观测平台监控指标接口 DescribeEMRInstances 支持资源级鉴权 | 2023-10-13 | - |
2023年09月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
StarRocks 集群类型新增产品版本 StarRocks-V2.0.0 | 新增产品版本 StarRocks-V2.0.0，对应社区 StarRocks 版本3.1.2 | 2023-09-21 | |
StarRocks 查询管理 | StarRocks 集群类型 V1.4.0 以上版本控制台支持查询管理功能 | 2023-09-12 |
2023年08月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
EMR-V3.5.0服务角色审计日志丰富 | EMR-V3.5.0丰富 HDFS、YARN、Hbase、Zookeeper 服务角色审计日志 | 2023-08-24 | |
丰富事件项 | EMR on CVM 新增 HMaster 发生主备切换、Zookeeper 发生 leader 切换事件项 | 2023-08-24 | |
新增 hadoop 集群版本 EMR-V3.6.0 | 新增 Hadoop3.x 标准发行版 EMR-V3.6.0，支持 Spark3.3.2、Trino414、Flink1.16.1、Iceberg1.1.0、 Hudi0.13.0、Kyuubi1.7.0 | 2023-08-08 |
2023年07月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
自动伸缩支持混合伸缩 | 自动伸缩支持时间策略和负载策略混合执行，负载策略支持多指标同时满足触发伸缩规则 | 2023-07-13 | |
立即释放 | 隔离状态的集群或节点支持一键释放 | 2023-07-13 | |
日志功能提升 | EMR on CVM 日志功能升级，支持筛选日志和源日志导出下载EMR on CVM 控制台日志新增 Kyuubi、Hue、Trino、SR | 2023-07-13 | |
服务指标丰富 | 新增 Kyuubi 监控指标丰富 NameNode NameService 维度监控指标PrestoSQL Query 类相关监控指标Hbase RegionServer 丰富监控指标 | 2023-07-13 | |
API 接口丰富 | 新增 DescribeHiveQueries、DescribeYarnApplications、DescribeImpalaQueries 查询接口 | 2023-07-13 |
2023年06月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
跨可用区部署开放 | 新建集群跨可用区部署功能开放使用 | 2023-06-30 | |
用户管理功能优化 | 新建集群支持通过控制台用户管理功能新增用户后，自动同步到 ranger | 2023-06-30 | |
Hive 查询管理丰富 | 查询列表丰富执行周期10+维度指标信息 新增查询概览多维度指标分布视图 异常 Hive 查询提供执行日志在线查看能力 | 2023-06-30 | |
EMR on TKE 公测 | 支持以腾讯云容器服务（TKE）为资源底座简单快速部署开源大数据集群，提升错峰资源使用率实现成本优化 | 2023-06-25 |
2023年05月
2023年04月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
StarRocks 集群类型新增产品版本 StarRocks-V1.4.0 | 新增产品版本 StarRocks-V1.4.0，对应社区 StarRocks 版本2.5.3 | 2023-04-18 |
2023年03月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 Kudu 数据表分析 | 支持表、表内 Tablets、表内 TabletServers 多维信息查看 提供 Tablets 级读写 QPS、存储量等多维信息分析 | 2023-03-24 | |
Hbase 新增 Region 分析 | 新增 Region 级读取 QPS、写入 QPS 等信息协助定位热点情况 | 2023-03-24 | |
监控指标告警丰富 | HMS 丰富进程打开连接数、Get Table 请求、当前活跃请求等相关监控指标及告警14+ HS2丰富当前请求数、查询提交/执行平均时间等监控指标及告警20+ Yarn 丰富队列级 Cpu、Memory 使用量的百分比占比指标告警 | 2023-03-24 | |
健康状态事件丰富 | 新增服务角色健康状态异常、服务角色健康状态超时 | 2023-03-24 | |
日志精准度优化 | 日志检索优化精准度，支持关键字检索及短语检索 | 2023-03-24 | |
Kafka 集群类型新增产品版本 Kafka-V2.0.0 | 新增产品版本 Kafka-V2.0.0，对应社区 Kafka 版本2.4.1 | 2023-03-23 | |
StarRocks 集群类型新增产品版本 StarRocks-V1.3.0 | 新增产品版本 StarRocks-V1.3.0，对应社区 StarRocks 版本2.4.3 | 2023-03-10 | |
Hadoop 集群类型新增 JDK11-Beta 版本 EMR- V4.0.0 | Hadoop 集群类型新增 JDK11-Beta 版本 EMR- V4.0.0，各组件均基于 JDK11 环境运行 | 2023-03-10 | |
EMR 容器版停止新购 | 因产品能力升级，EMR 容器版停止新购 | 2023-03-10 |
2023年02月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
丰富 Yarn 作业查询分析 | Yarn 作业查询新上用户提交量、资源消耗等维度的数据分布统计 | 2023-02-09 | |
新增 Hive (基于 Hive MetaStore) 数据表分析 | 支持查看总表、总存储量、数据表分布及趋势等重点维度的全局指标数据信息 提供数据表列表及其表分区信息相关多维度数据查看功能 | 2023-02-09 | |
新增 HDFS 文件级别分析功能 | 支持查看 HDFS 文件量分布、存储量分布等重点维度的数据分布 提供 top 大文件、top 小文件等常见问题点的信息查看及下载功能 | 2023-02-09 |
2023年01月
2022年12月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Java-GC 在线分析 | Java 分析-GC 在线日志分析，帮助用户排查因 GC 导致进程异常排查，实时采集、记录并分析 GC 日志 | 2022-12-06 | |
Kafka 角色级监控 | Kafka 丰富角色级监控指标项70+，同时支持核心监控指标的告警功能 | 2022-12-06 | |
丰富默认事件项 | 丰富子机 UTC 时间和 NTP 时间差值、Kerberos 响应时间、HDFS MissingBlocks 数量、HDFS NameNode 进入安全模式等事件项 | 2022-12-06 | |
Kudu 丰富默认告警策略 | Kudu 服务丰富单台 teserver 数量、数据目录失败数量、数据目录打满数量等默认告警策略 | 2022-12-06 | - |
配置管理功能升级 | 新增配置状态，支持查看过期配置详情、失败配置详情 配置文件、配置项、配置项描述、配置筛选条件丰富 | 2022-12-06 | |
Yarn 资源调度功能升级 | 支持标签调度、队列删除、调度历史查看等 | 2022-12-06 | |
新增客户端管理 | 新增客户端管理入口，支持客户端信息查看 | 2022-12-06 | |
云硬盘支持调整 | 支持在 EMR 控制台对节点中的云数据盘机型调整，支持磁盘扩容操作和额外挂载功能。 云盘异构能力新增支持容量异构 | 2022-12-06 | |
批量修改续费操作 | 支持在 EMR 控制台批量对节点进行自动续费开启或关闭操作 | 2022-12-06 | |
批量变更配置 | 支持对同地域同计费类型节点机型批量变配操作 | 2022-12-06 |
2022年11月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
StarRocks 监控指标丰富 | 丰富 StarRocks 的各角色基础监控指标 | 2022-11-03 | |
EMR 容器版支持 RSS（即 Remote Shuffle Service 集群） | EMR 容器版支持 RSS 基于弹性容器（EKS）部署 Spark 集群支持关联 RSS 集群 | 2022-11-01 | |
自动伸缩支持托管伸缩 | 托管伸缩功能开启后，会持续监控集群 yarn 的负载系统自动补充和减少计算节点 | 2022-11-01 |
2022年10月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Hadoop 集群类型新增产品版本 EMR-V3.5.0 | 新增 Hadoop3.x 发行版 EMR- V3.5.0，支持 Hive3.1.3、Spark3.2.2、Hbase2.4.5、Flink1.14.5、trino389、Iceberg0.13.1、deltalake2.0.0、Hudi0.12.0、Zeppelin0.10.1、Superset1.5.1、Ranger2.3.0 | 2022-10-27 |
2022年09月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Impala 分位分布统计 | Impala 查询支持执行状态分布及多维度分位分布 Impala 查询丰富总/HDFS/KUDU 扫描行数、内存峰值、读取/发送量、内部总扫描/发送量等维度 执行时长大于3秒的查询提供总览及结构化 Profile 功能 | 2022-09-21 | |
监控事件告警丰富 | Druid 丰富100+指标至腾讯云可观测平台“弹性 MapReduce（动态）”支持配置动态告警策略 默认告警策略新增8个服务的总计20项默认告警指标 Impala 服务4项 Query 事件项支持 EB 配置告警 | 2022-09-21 | - |
Yarn 作业管理新上应用对比及应用洞察 | TEZ 类型作业支持查看任务信息 支持 Tez/Spark/MapReduce 作业类型应用级应用洞察/应用对比功能 Tez/MapReduce 类型应用支持任务级 HOST 监控指标对比 Yarn 的任务信息使用、作业时间筛选体验优化 | 2022-09-09 |
2022年08月
2022年07月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
上线控制台概览页 | 提供集群概览，集群状态统计信息，运行服务的健康状态，事件发生统计等信息 | 2022-07-22 | - |
集群概览功能升级 | 优化升级集群目录导航 细化已部署的服务健康状态，增加集群事件实时统计信息 | 2022-07-22 | |
Impala 查询维度及巡检项丰富 | 增加会话 ID、Coordinator、单点内存峰值等维度 Impala 服务 Query 超时、Query 失败总数、Query 总体提交数、执行 Query 失败率四项巡检项 | 2022-07-22 | |
Impala Deamon 角色指标建设 | 新增70+ Impala Deamon 的指标可视化并支持腾讯云可观测平台侧指标告警 | 2022-07-22 | |
应用接口丰富 | 开放 Yarn 应用队列统计接口 | 2022-07-22 | |
Hadoop 集群新增产品版本 EMR-V2.7.0 | 支持 Hive2.3.9、Spark3.2.1、Hbase2.4.5、Flink1.14.3、trino385、Zookeeper3.6.3、Iceberg0.13.0、Hudi0.11.0、Alluxio2.8.0、Zeppelin0.10.1、Superset1.4.1、Ranger2.1.0 | 2022-07-18 | |
自动伸缩功能可用性提升 | 扩容规则触发支持多种资源规格混合部署，以及按量计费和竞价实例混合部署 | 2022-07-07 | |
HBase 支持 RIT 修复工具 | 支持对处于 rit 状态的 region 进⾏修复 | 2022-07-07 | |
EMR 容器版开放公测 | 北京、上海、广州地域已正式开放 EMR 容器版功能 | 2022-07-07 |
2022年06月
2022年05月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
扩容功能优化 | 支持新增子网扩展集群节点容量 Kyuubi 服务支持扩容 | 2022-05-17 | |
角色管理、用户管理增强 | 用户管理支持通过API批量导入导出用户 资源管理页支持查看客户端信息 新增 DescribeClusterPhysicalMetaInfo 资源级鉴权 API | 2022-05-17 | - |
2022年04月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Hadoop 集群新增产品版本 EMR-V3.4.0 | 支持 Spark3.2.1、Trino372、Flink1.14.3、Hbase2.4.5、Zookeeper3.6.3、Impala4.0.0、Zeppelin0.10.1、Alluxio2.8.0、Hudi0.10.1、Iceberg0.13.1、Goosefs1.2.0 新版本中 PrestoSQL 更名为 Trino，并支持 Ranger，新版本中监控指标告警需按 Trino 配置 | 2022-04-22 | |
监控丰富 | 事件列表交互焕新 增加节点单盘 Inode 使用率、单盘空间使用率、单盘 IO 使用率、Hbase-HMaster 均 StandBy、HDFS-NameNode 均 StandBy 事件项 HDFS-DataNode新增 Block 数、使用磁盘容量、空闲磁盘容量、预留磁盘容量等监控指标 | 2022-04-22 | |
支持 EMR 容器版 | 北京、上海、广州、南京地域支持 Spark 基于弹性容器（EKS）部署 | 2022-04-12 |
2022年03月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 StarRocks 集群类型 | 新增 StarRocks 集群类型，并集成 StarRocks 社区版 | 2022-03-11 | |
弹性节点默认不分配 ApplicationMaster | 自动伸缩节点默认不分配ApplicationMaster，保证运行的 ApplicationMaster不被销毁，Job 可以正常进行 | 2022-03-08 | |
负载伸缩新增指标 | 按负载自动伸缩新增 ContainerPending、AppPending、AppRunning 等负载伸缩指标 | 2022-03-08 | |
扩容 host 资源支持设置 Node Label | 支持添加 host 资源设置 Yarn Node Label，提升资源利用效率 | 2022-03-08 | - |
2022年01月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 Doris 集群版本 Doris-V1.2.0 | 新增 Doris 0.15版本 | 2022-01-21 | |
组件配置共享 | 持用户使用一套组件的配置和使用方式管理多个集群时，使用已构建集群的组件共享给其他集群使用，而不必再部署相同的组件 | 2022-01-14 | |
新增监控指标 | 新增 Kylin、Zeppelin、Oozie、Storm、Livy、Kyuubi 监控指标丰富 CosRanger 监控指标 | 2022-01-14 | |
日志搜索优化 | 覆盖更多组件、支持境外地域、日志搜索交互优化 | 2022-01-14 |
2021年12月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Hadoop 集群类型新增4种应用场景 | Hadoop 集群类型在原有默认场景下新增：zookeeper、Hbase、Presto、kudu 应用场景，帮助用户根据业务场景快速构建集群 | 2021-12-17 | |
支持新版购买页 | 优化现有集群创建流程，支持置放群组节点维度便于用户资源统一管理 | 2021-12-17 | |
系统盘可选 | 支持用户根据实际需要自定义选择系统盘类型及大小 | 2021-12-17 | - |
任务中心优化 | 支持集群内部查看当前集群所有任务详情，优化任务中心交互路径，便于用户查看使用 | 2021-12-17 | - |
组件操作功能丰富 | HDFS、YARN 等组件指令级操作可界面化设置 | 2021-12-07 | |
新增监控指标 | 新增 Doris 监控指标原 HBase 表负载调整为 HBase 表级监控 | 2021-12-07 | |
操作系统升级 | Hadoop 类型所有 EMR 版本升级操作系统为 TencenOS Server，提供更稳定、安全和高性能的云原生运行环境。已建集群操作系统相关安全问题加固修复，请联系售后渠道或腾讯云助手 | 2021-12-03 |
2021年09月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 hadoop 集群版本 EMR-V3.3.0 | 新增 Hadoop3.x 标准发行版 EMR-V3.3.0，支持 HBase2.3.5、Phoneix 5.1.2、Kudu1.15.0、Hue4.10.0、Hudi0.8.0、Tez0.10.1、Livy0.8.0、Ganglia3.7.2、Kyuubi1.1.0、LDAP2.4.44 | 2021-09-28 | |
新增监控指标 | 丰富 Alluxio 服务监控指标，新增 CosRanger 监控指标 | 2021-09-15 | |
接入腾讯云可观测平台默认告警 | 腾讯云可观测平台支持弹性 MapReduce 指标/事件默认告警策略 | 2021-09-15 | - |
2021年08月
2021年07月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 hadoop 集群版本 EMR-V2.6.0 | 新增 Hadoop2.x 标准发行版 EMR-V2.6.0，支持 Spark 3.0.2、Impala 3.4.0、Goosefs 1.0.0、OpenLDAP 2.4.44、Kyuubi 1.1.0 等 | 2021-07-15 |
2021年06月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 Yarn 作业查询 | 提供 Yarn 作业的明细指标统计 | 2021-06-24 | |
新增 Impala 查询管理 | 提供 Impala 的查询作业的明细指标统计 | 2021-06-24 | |
自动伸缩支持竞价实例 | 通过自动伸缩，弹性补充计算节点支持竞价实例计费类型 | 2021-06-03 | |
支持优雅缩容 | 节点在执行任务时，缩容触发时不会立即释放节点，在等待任务执行完成后进行缩容节点 | 2021-06-03 | |
Knox 支持集成 TEZ | 支持 tez 任务使用 ui 查看 | 2021-06-03 | |
新增可用区 | 支持新加坡地域三区和东京二区 | 2021-06-03 | - |
国际站新增地域 | 国际站支持：法兰克福、弗吉尼亚、曼谷、孟买、东京、首尔等 | 2021-06-03 | - |
2021年05月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 Kafka 集群版本 Kafka-V1.0.0 | 新增 KAFKA 标准发行版 KAFKA-V1.0.0，支持 Kafka1.1.1、KafkaManager2.0.0.2、Knox1.2.0、Zookeeper3.6.1 | 2021-05-13 | |
新增 Doris 集群版本 Doris-V1.0.0 | 新增 DORIS 标准版发行版 DORIS-V1.0.0，支持 Doris0.13.0、Knox1.2.0 | 2021-05-13 | Doris 开发指南 |
2021年04月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 hadoop 集群版本 EMR-V3.2.0 | 新增 Hadoop3.x 标准发行版 EMR-V3.2.0，支持 hadoop3.2.2、Spark3.0.2、presto350、Flink1.12.1、Alluxio2.5.0、Ranger2.1.0、iceberg0.11.0、hudi0.7.0 | 2021-04-30 | |
启停服务 | 支持单节点上启停全部服务 | 2021-04-27 | |
新增 Hadoop 集群版本 EMRv2.5.1 | 新增 Hadoop2.x 标准版发行版 EMR-V2.5.1，支持 alluxio2.5.0、hudi0.5.1，alluxio 支持 cos 透明 URI | 2021-04-10 |
2021年03月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
集群恢复 | 包年包月计费类型集群在隔离状态支持续费恢复集群 | 2021-03-17 |
2021年02月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增境外地域开服 | 中国站境外地域新增曼谷、首尔、东京、弗吉尼亚地域开服 | 2021-02-02 | - |
2021年01月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增集群脚本功能 | 支持批量选择节点运行指定脚本，以便高效进行批量运维操作 | 2021-01-26 | |
支持跨机型变配 | 在节点配置变更时，可以选择其它机型，满足当前机型售罄场景的变配需求 | 2021-01-26 | |
自动伸缩 | 根据预设策略自动增加或减少 Task 节点，在满足集群计算能力的同时并节约成本 | 2021-01-26 | |
新增监控指标 | hdfs、yarn、hbase、hive、druid 服务监控指标丰富 kudu、alluxio 新增服务监控 | 2021-01-13 | |
新加坡国际站开服 | 新加坡一区、新加坡二区支持国际站购买 | 2021-01-13 | - |
2020年12月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 hadoop 集群版本 EMRv3.1.0 | 新增 Hadoop3.x 标准发行版 EMR-V3.1.0，支持 impala3.4.0、flink1.10.0、hbase2.3.3、Phoenix5.0.0、alluxio2.3.0、kudu1.13.0、zookeeper3.6.1 | 2020-12-14 |
2020年11月
2020年10月
2020年09月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 Hadoop 集群版本 EMRv2.5.0 | 升级 Alluxio 组件至稳定版本2.3.0，优化 Alluxio 在计算存储分离场景下性能 | 2020-09-17 |
2020年08月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 hadoop 集群版本 EMRv2.4.0 | 新增支持 KUDU 组件，部分组件升级 | 2020-08-27 | |
ClickHouse 支持数据迁移 | 提升集群资源利用率，保证数据安全 | 2020-08-17 | ClickHouse 数据迁移指引 |
2020年07月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
自定义配置文件 | 支持自定义配置文件，提升配置管理的灵活性 | 2020-07-29 | |
配置项编辑优化 | 配置项增加提示，并支持恢复默认值 | 2020-07-29 | - |
2020年06月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 Druid 服务监控和 Hbase thrift 角色监控 | 新增 Druid 服务监控、Hbase thrift 角色监控，提升问题排查效率 | 2020-06-15 | |
新增 hadoop 集群版本 EMRv2.3.0 | 新增支持 Tensorflow 和 Jupyter Notebook 组件 | 2020-06-15 | |
Clickhouse 类型集群新增发行版 clickhouse-v1.1.0 | ClickHouse 组件版本升级至 LTS 版本，新增支持 superset 组件 | 2020-06-15 | - |
支持集群事件和集群巡检 | 控制台支持记录集群发生的关键变化事件或异常事件，提升集群排障效率。支持集群设置及时巡检或定期巡检任务，便于掌握集群健康情况，及时对异常或风险点进行处理 | 2020-06-04 |
2020年05月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
控制台交互展示与操作路径优化 | 操作路径层级更加清晰，提升服务管理的易用性 | 2020-05-15 | - |
支持 ClickHouse 集群服务监控 | 便于掌握 ClickHouse 运行状况 | 2020-05-15 | |
角色管理新增监控状态 | 以便于了解角色进程实时状态 | 2020-05-15 | - |
2020年04月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增集群类型 | 新增 ClickHouse 集群以及 druid 集群，提供更丰富的实时查询解决方案 | 2020-04-15 | ClickHouse 简介 |
引导操作优化 | 引导操作增加集群启动前执行时机，并支持集群创建成功后调整引导操作，以便于业务变化后优化引导操作 | 2020-04-15 | - |
服务重启策略优化 | 服务重启支持设置重启策略，便于选择恰当的重启方式以及重启异常处理策略 | 2020-04-15 | - |
2020年03月
2020年02月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
Hive 元数据库共享 | 选择 Hive 组件时，支持选择关联外部 Hive 元数据库存放新集群的 Hive 元数据，以使多个 Hive 集群可共享同一元数据，实现多个集群数据交换 | 2020-02 | |
集群操作日志优化 | 丰富集群操作日志展示项，提升操作日志可读性 | 2020-02 | - |
国际站版本上线 | 国际版地域支持北京、上海、广州、孟买 | 2020-02 | - |
2020年01月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
EMR 支持云硬盘加密 | EMR 支持 cbs 白名单用户在创建 EMR 集群时选择云硬盘加密功能 | 2020-01 | |
TASK 节点支持挂载多云盘 | 创建或扩容集群时，task 节点支持挂载云盘 | 2020-01 | - |
开放南京地域 | EMR 新增支持南京地域 | 2020-01 | - |
2019年12月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增配置分组下发功能 | 配置分组下发即当配置组中存在节点配置与当前配置组配置不一致时，将配置组配置下发到配置不一致的节点 | 2019-12 | - |
CAM 资源级授权 | 支持 CAM 资源级授权 | 2019-12 | - |
上线关联 CHDFS 功能 | 支持关联 CHDFS，可读写 CHDFS 上的数据 | 2019-12 | |
支持 AMD 机型 | 北上广地域支持 AMD 机型标准型 SA2 | 2019-12 | |
新增集群监控概览页 | 集群监控概览页，提供集群状态、节点及服务状态整体视图 | 2019-12 | |
服务监控页支持按需选择指标展示粒度 | 优化服务监控页，指标展示粒度可按需选择 | 2019-12 | - |
节点监控页增加节点服务部署和负载状态视图 | 优化节点监控页，增加节点服务部署状态、负载状态视图 | 2019-12 | - |
2019年11月
2019年10月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增 EMR-V3.0.0 版本 | 新增 EMR-V3.0.0 版本，同时升级相关主要的组件版本 | 2019-10 |
2019年09月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
云 API 全量支持3.0版本 | 云 API 全量支持3.0版本，规范原已提供部分3.0版本 API 接口的出/入参数、以及在3.0版本中全量支持原2.0版本接口 | 2019-09 | - |
控制台修改配置 | 取消对特殊字符转义功能 | 2019-09 | - |
支持腾讯云可观测平台配置告警策略 | 节点监控和服务监控关键指标支持在腾讯云可观测平台（弹性 MapReduce 产品类别下）配置告警策略 | 2019-09 | - |
2019年08月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
新增软件配置功能 | 新增软件配置功能支持自定义组件参数创建集群，同时兼容访问外部集群功能 | 2019-08 | |
新购集群时，远程登录端口可自行设置 | 新购集群过程中支持自主开启/关闭远程登录端口 | 2019-08 | - |
新购集群支持多云盘挂载 | 对于新购集群可支持多云盘挂载功能 | 2019-08 | - |
上线指定组件扩容功能 | 支持指定组件扩容功能，可实现对指定组件的扩容 | 2019-08 | - |
增加组件监控指标 | 新增 Spark、Hive、Presto、Zookeeper 组件监控指标 | 2019-08 | - |
2019年07月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
上线 HBase 表级监控功能 | 支持对 Hbase 的表级监控， 提供了 HBASE 中各表的读写请求数以及表存储情况的监控。 | 2019-07 | |
EMR 支持新地域 | 支持新加坡、孟买、成都地域 | 2019-07 | - |
支持新机型 | 北上广地域支持机型标准型 S4、标准网络优化 SN3ne | 2019-07 | - |
监控页面交互优化，并新增部分监控指标 | 监控页面交互优化，并新增部分监控指标 | 2019-07 | - |
优化 WebUI 代理地址 | WebUI 代理地址优化 | 2019-07 | - |
2019年06月
2019年05月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
发布 EMR2.1.0 版本 | 新增 EMR 2.1.0 版本，相关主要组件版本升级 | 2019-05 | |
上线 Kerberos 安全集群 | 支持创建安全类型集群，即集群中的开源组件以 Kerberos 的安全模式启动，在这种安全环境下只有经过认证的客户端（Client）才能访问集群的服务（Service，例如 HDFS） | 2019-05 | |
监控指标优化 | 节点、HDFS、YARN、HBase 监控指标 | 2019-05 | |
优化控制台样式 | 控制台样式升级，提升交互体验 | 2019-05 | - |
优化 CVM 与 TencentDB 命名 | CVM 与 TencentDB 命名带 EMR 集群序列号，以便对应集群信息 | 2019-05 | - |
Master 节点外网 IP 改为可选 | 更新 Master 节点的外网 IP 为可选 | 2019-05 | - |
上线 Common 节点数量可调节功能 | 支持 Common 节点数量可按需调节 | 2019-05 | - |
2019年03月
2019年01月
动态名称 | 动态描述 | 发布时间 | 相关文档 |
对已有集群添加新组件 | 对于已创建的集群，增加新增组件功能 | 2019-01 |
