首页
学习
活动
专区
圈层
工具
发布

#elk

考古|ES 5.0 的 cat API 改了列名还删了 total,监控脚本最先遭殃

岳涛

腾讯云TDP | 官方产研 (已认证)

5.0 的 cat API 变了不少:用 Accept 头取代 Content-Type 决定响应格式、cat nodes 删掉 host 列、cat reco...

4500

时序|ECS 日志改写成 OTel 字段,ES 9.1 这个处理器是迁移不是优化

岳涛

腾讯云TDP | 官方产研 (已认证)

如果你在用 Elastic 的日志采集(Filebeat、Elastic Agent),文档里的字段是 ECS 命名(span.id、log.level)。9....

4100

考古|ES 5.6 发了高级 REST 客户端,别急,接口还只覆盖五个

岳涛

腾讯云TDP | 官方产研 (已认证)

5.6 的 breaking 有四条,跨两个方向:客户端侧,Java High Level REST Client 首次发布,官方明确它要在近期取代 Trans...

12620

时序|分位数摘要可以预先算好再合并了,ES 9.3 的 tdigest 字段类型

岳涛

腾讯云TDP | 官方产研 (已认证)

T-Digest 是一种估算分位数的数据结构。以前它只活在聚合的内部计算里,9.3 把它变成了可以存进索引的字段类型。这带来的变化是:分位数摘要可以预先算好、存...

9110

考古|ES 5.4 和 5.5 的几条零散变更,delete-by-query 要显式写 query

岳涛

腾讯云TDP | 官方产研 (已认证)

5.4 只有一条:delete-by-query 不带显式 query 的请求被废弃(6.0 起非法)。5.5 有三条:扫描插件目录时不再跳过隐藏文件;ES_S...

16210

向量|指定文档排在最前面,ES 9.1 的 pinned retriever 能和别的检索器组合

岳涛

腾讯云TDP | 官方产研 (已认证)

检索器(retriever)体系里加了一个 pinned。作用很直白:把指定的文档顶到结果最前面,其余的交给另一个检索器。它和早年的 pinned query ...

14010

考古|ES 5.3 三条提前打招呼的改动,布尔值写 yes/on 的要先 grep 一遍

岳涛

腾讯云TDP | 官方产研 (已认证)

5.3 的 breaking 只有三条,都不是"不能用了"而是"提前打招呼,6.0 才移除":日志系统属性从单个 es.logs 拆成 es.logs.base...

23310

检索|ES 的 synthetic_source_keep=arrays 对某些字段是白存一份

岳涛

腾讯云TDP | 官方产研 (已认证)

9.1 改了 synthetic_source_keep: arrays 的行为:如果字段类型本身就会解析数组,这个设置不再额外生效。听起来很绕,但它解决的是一...

15320

考古|ES 5.2 起 seccomp 装不上就起不来,官方叫它过滤器是有原因的

岳涛

腾讯云TDP | 官方产研 (已认证)

5.2 把"系统调用过滤器有没有装成功"变成 bootstrap check:过滤器开着但没装上,节点拒绝启动。同时 bootstrap.seccomp 改成 ...

12110

向量|ES 的重打分能写进 mapping,rescore_vector 填错会报错

岳涛

腾讯云TDP | 官方产研 (已认证)

9.1 给 dense_vector 的索引选项加了 rescore_vector 参数。把"要不要重打分、过采样多少"写进 mapping,就不用每个查询都带...

9710

考古|ES 5.1 的别名名字开始校验,下划线开头等老写法会被拒

岳涛

腾讯云TDP | 官方产研 (已认证)

5.1 的 breaking 只有两条:索引别名开始校验命名规则(空格、不能以 _/-/+ 开头、长度上限),以及 Log4j 2.6 升级到 2.7。同一页还...

15510

运维|ES 的 ML 自适应分配可以缩到 0 了,默认空闲 24 小时触发

岳涛

腾讯云TDP | 官方产研 (已认证)

9.1 给机器学习推理的自适应分配(adaptive allocations)加了一个开关:空闲多久之后把分配数缩到 0。默认 24 小时。 这条改动直接关系到...

15310

日志平台要检索引擎还是分析引擎?我把两套合一的经过和判断方法

野生数据人

摘要:如果你也在同时养一套检索引擎加一套分析库来看日志,这篇讲讲我怎么判断"该不该合一"、合一之后哪些参数最容易配错、以及用哪三个数字验证效果。结论先说:合一的...

10110

ClickHouse 适合存日志吗?从滴滴大厂实践看优势、限制,以及与 Elasticsearch、Doris 的区别

野生数据人

ClickHouse 适合存储和分析大规模日志,尤其是写入量大、以时间范围过滤和结构化统计为主的场景。 滴滴已经将其用于大规模日志平台,公开披露的生产集群超过 ...

14510

考古|percolator 在 ES 5.0 变成字段类型,注册查询后要等 refresh 才可见

岳涛

腾讯云TDP | 官方产研 (已认证)

5.0 把 percolator 的存储从"保留类型 .percolator"改成"字段类型 percolator",并让它变成近实时:注册查询后要等 refr...

17010

ES 的 ILM 进了只读也标 indexing_complete,别只拿它判断还写不写

岳涛

腾讯云TDP | 官方产研 (已认证)

9.2 起 ILM 执行 ReadOnly 动作时会把 indexing_complete 设为 true。这是一个内部标记的自动化——以前要单独配,现在 Re...

20310

考古|ES 5.0 的 Java 客户端要重新依赖,transport client 单独成包

岳涛

腾讯云TDP | 官方产研 (已认证)

5.0 的 Java API 变更里,最容易被注意到的是三处:transport client 从核心拆成独立 artifact(org.elasticsear...

19210

ES 的 `tracing.apm.*` 设置删了,留着节点会拒绝启动

岳涛

腾讯云TDP | 官方产研 (已认证)

9.0 移除了 tracing.apm.* 系列设置,改用 telemetry.* / telemetry.tracing.*。这条 breaking 的失效方...

23410

考古|ES 5.0 插件改动要先列已装插件再对照,site 插件下线、bin/plugin 改名

岳涛

腾讯云TDP | 官方产研 (已认证)

5.0 的插件改动有 14 条,但哪条对你有影响,取决于 plugins 目录里装了什么。bin/plugin 改名 bin/elasticsearch-plu...

17210

ES|QL|有了列出和查询异步任务的 API,不用再盲等

岳涛

腾讯云TDP | 官方产研 (已认证)

9.1 给 ES|QL 加了 list / get query 两个 API。作用很朴素:让你能查看正在跑的异步查询有哪些、各自什么状态。以前只能拿到一个 id...

16410
领券