Elasticsearch Service（ES）_ELK_日志分析

产品特性

易于部署和管理

轻点鼠标，即可在数分钟内创建 ES 集群、Logstash 集群，建立 Beats 管理中心，结合便捷的监控告警，弹性伸缩、集群智能巡检等，助您轻松应对集群日常运维。

费用低廉

引入极致性价比的腾讯自研星星海服务器，和性能卓越而价格低廉的本地盘机型（高 IO 型/大数据型），结合冷热分离、自研索引压缩算法等，帮您极大降低集群拥有成本。

强劲自研内核

自研熔断限流、压缩编码、内存优化、读写性能优化等特性，引入腾讯自研 Kona JDK，大幅提升集群性能、稳定性和成本优势。是开源社区全球贡献最多的第三方企业之一。

Elasticsearch 高级特性

集成登录认证、权限控制、监控告警、机器学习、SQL 等 Elasticsearch 高级特性（X-Pack），提升 ES 集群的安全、运维和深度探索能力。

高可用

支持 COS 备份恢复，跨地域/可用区多活，避免意外造成的数据丢失或停服。自研针对高并发和大查询的熔断限流等内核技术，大幅提升集群稳定性。

安全加固

通过逻辑隔离的私有网络，内外网访问控制、登录鉴权、细粒度权限控制等，切实保证您云上资源的安全。

应用场景

日志分析
信息检索
数据分析
数据库查询加速

业务系统运行过程中，服务器、数据库和容器等会产生大量日志和监控数据，而且存储分散、种类繁多、规模庞大，很难进行检索和分析。ES 通过丰富的数据采集工具和分布式存储，方便日志统一管理和指标实时监控，通过一站式全观测优势，帮助用户快速定位问题，提升运维效率。

开源自建对比

基于自研内核技术、丰富的云原生能力及高级商业特性，相比开源自建，以更低成本提供更高性能及稳定性

功能分类	功能点	功能说明
集群运维管理	安装部署	一键创建 ES 集群、Logstash 集群以及 Beats 采集器
	弹性伸缩	百节点、PB级平滑弹性扩缩容，无需停服
	配置管理	灵活的YML配置、场景化配置以及Forcemerge定时任务设置
	同义词及分词管理	支持上传/更新同义词，引入腾讯自研QQ分词
	插件管理	10+系统插件及自定义插件灵活安装
	日志查询	支持查询集群主日志、搜索慢日志、索引慢日志、GC日志等各类日志
	IP溯源	支持独立开启IP溯源日志，采集客户端的访问操作、访问IP等信息
	监控告警	提供60+集群、节点指标项，并通过可观测平台实现监控告警
	智能巡检	20+巡检项健康检测，并输出巡检报告以及巡检建议
	版本升级	一键升级ES版本、内核版本以及高级特性
	故障支持	7 x 24 小时在线专家服务
数据管理	自治索引	支持分片自动调优、智能滚动、查询裁剪、故障自愈，实现索引全托管
	索引管理可视化	可视化创建、编辑索引，并支持索引粒度的监控告警
	数据接入可视化	日志采集链路可视化创建与管理，降低数据接入门槛
	机器学习	通过对业务数据进行实时分析与建模，实现异常检测与数据预测
	第三方模型	支持部署第三方NLP模型进行数据推理，执行各种NLP任务
	语义搜索ELSER	支持Learned Sparse Encoder，提供更好相关性、语义化的搜索
	数据告警	支持 Alerting 告警能力，通过配置自定义规则实现数据告警
成本优化	压缩算法	引入 ZSTD 压缩算法，压缩比提升30% - 50%
	存算分离	自研基于对象存储的智能混合存储引擎，降低存储成本50%+
	FST Off-Heap 内存优化	自研堆外缓存，降低堆内内存使用量，大幅提升单节点磁盘管理能力
性能优化	读写分离	自研无共享、自闭环读写分离架构，隔离资源的同时提升写入性能1倍+
	物理复制	主从副本物理复制，消除副本冗余写入栈，写入性能提升50%
	定向路由	分片定向路由优化，优化写入高扇出、长尾问题，写入性能提升30%+
	写入去重	写入去重优化，消除副本冗余去重开销，带主键写入性能提升50%+
	Segment 并行化	多 Segment 并行化处理，精准拉取文件数据段，查询性能提升5倍+
	时序剪枝	时序索引查询裁剪优化，高基维时序范围搜索性能提升10倍+
	鉴权优化	X-Pack 鉴权性能优化，消除鉴权热点开销，提升查询性能30%+
安全	公私网访问黑白名单	支持私有网络VPC、安全组及公网访问IP黑白名单设置
	传输加密	支持 HTTPS 通信协议，提升数据传输安全
	存储加密	支持云盘加密，有效保护数据隐私，满足安全合规要求
	访问控制	支持 LDAP 企业身份认证以及 SAML 单点登录（SSO）
	权限管理	支持文档、字段级别的权限管控设置
高可用	集群规模	集群扩展性优化，大幅提升分片、节点管理规模以及集群重启效率
	数据均衡	节点、索引、多盘等多层级均衡优化，提升集群负载均衡能力
	自动备份	自动为集群创建快照并备份到对象存储COS，实现数据备份
	熔断限流	支持针对高并发和大查询的熔断限流内核特性
	同城多活	支持多可用区部署，实现同城多活
	异地灾备	支持跨集群复制（CCR），将数据从生产集群复制到灾难集群