首页
学习
活动
专区
圈层
工具
发布

#elk

ES 0.90 的 percolator 把查询存进索引,再拿文档去问它

岳涛

腾讯云TDP | 官方产研 (已认证)

0.90 的 percolator 先把查询注册到 _percolator 索引,再发文档过去问哪些查询命中。本文按固定标签核对注册与匹配路径、过滤执行哪些查询...

000

ES 的 LogsDB 和 TSDB 索引里 `text` 字段不再有 norms 了,而且开不回来

岳涛

腾讯云TDP | 官方产研 (已认证)

9.2 起这两种索引模式下 text 字段的 norms 默认关闭。官方 details 里有一句很关键:由于不支持从禁用状态启用,用户将无法在这些索引上开启 ...

000

存量 ES 查询资产怎么批量迁到 SQL:盘点、改写与回归验证的完整方案

野生数据人

【摘要】把日志查询从 Elasticsearch 迁到 Apache Doris,真正的难点不是单条 DSL 怎么翻,而是几十上百条看板、告警规则、排查手册里的...

2900

存量 ES 索引批量转 Doris 建表语句:字段盘点、类型映射规范、分片副本换算与灰度验证

野生数据人

【摘要】存量环境里要迁的从来不是单个索引,而是一群索引:同一个 K8s 容器日志可能有几十个按天或按集群拆出来的索引,字段名看着一样,Mapping 细节各有出...

3300

日志采集链路改投 Doris 的整体方案:直写与 Kafka 中转怎么选、吞吐与可靠性怎么设计、灰度怎么切

野生数据人

【摘要】采集侧从 Elasticsearch 切到 Apache Doris,方案层面只有两个主干:采集器直写 Stream Load,或者保持落 Kafka ...

2010

金融、互联网、AI 三行业日志平台迁移:ES 替换的路径结构与收益构成

SelectDB技术团队

摘要:日志与可观测平台的 Elasticsearch 替换,收益结构随行业不同而不同。金融场景以多源归一与并发治理为主:中信银行信用卡中心日志云平台从 ES 9...

3410

ES 0.90 的三个打分查询,怎样被 function_score 收成一个

岳涛

腾讯云TDP | 官方产研 (已认证)

0.90 早期改分要靠三个查询:custom_boost_factor 乘系数、custom_score 写脚本、custom_filters_score 按过...

8900

ES|QL 有了 `SCORE()`,能给单个条件单独打分了

岳涛

腾讯云TDP | 官方产研 (已认证)

9.3 把 SCORE 函数放进了正式构建。它作用于单个全文函数(比如 match),返回那个条件的分数。配合 METADATA _score,可以在一条查询里...

9600

ES 老代码里的 filtered 查询,不能只按字段名改成 bool

岳涛

腾讯云TDP | 官方产研 (已认证)

0.90 同时有 query、filter、bool filter 和 and/or/not。本文按固定标签核对它们的组合、范围边界与缓存行为,再用最小数据集说...

16220

ES 推理接口加了节点级限流,每个 endpoint 能设每分钟请求数

岳涛

腾讯云TDP | 官方产研 (已认证)

9.0 给 Inference API 加了节点本地限流。配置在 endpoint 上,单位是每分钟请求数。它保护的是外部推理服务——批量导入时把对方打挂,或者...

16620

统计功能在 ES 里最早叫 facet——那会儿它还写成 ElasticSearch

岳涛

腾讯云TDP | 官方产研 (已认证)

0.90.0 GA 的标签打在 2013 年 4 月 29 日(提交信息:release 0.90.0 GA)。那会儿官方文档里这个词还拼成 ElasticSe...

26321

一条查询做多件事,靠 ES|QL 的 FORK 和 INLINE STATS

岳涛

腾讯云TDP | 官方产研 (已认证)

ES|QL 的 FORK 和 INLINE STATS 都已转正:前者把一条查询劈成几路并行跑,后者聚合完还能保住原始行。本文讲清两者的用法、版本状态和各自的使...

26920

ES 曾经自带"文档自动过期":0.90 的 `_ttl` 是怎么干活、又是怎么没的

岳涛

腾讯云TDP | 官方产研 (已认证)

0.90 里给 mapping 加一个 _ttl,文档到期就会被自动删掉——不用定时任务、不用 delete-by-query。这个功能 2.0 被标记废弃,5...

27220

超时不再是 5xx:ES 9.0 把它改成了 429,重试逻辑得跟着改

岳涛

腾讯云TDP | 官方产研 (已认证)

9.0 起 Elasticsearch 的超时异常从 5xx 变成 429(Too Many Requests)。这条 breaking change 不报错、...

23820

ES 建索引默认给几个分片?6.x 是 5,7.0 之后是 1

岳涛

腾讯云TDP | 官方产研 (已认证)

6.x 及更早版本建索引不指定分片数,默认给 5 个;7.0 把这个默认值改成了 1。本文说说这条改动背后的"过度分片"问题,以及当年分片数定死之后到底有多难改...

45830

写不进去的文档,别再悄悄丢了:Failure Store

岳涛

腾讯云TDP | 官方产研 (已认证)

ES 9.1 引入 Failure Store,把 ingest 失败或 mapping 冲突的文档存下来,9.2 起对日志流默认开启。本文讲怎么开、怎么查,以...

44560

ES|QL 终于有视图了:把常用查询变成一个"虚拟索引"

岳涛

腾讯云TDP | 官方产研 (已认证)

ES 9.4 给 ES|QL 加了 Views:把一段查询定义成有名字的视图,之后在 FROM 里当索引用。本文讲清定义方式、嵌套与分支上限、预览阶段的限制,以...

30920

云上日志分析方案:ELK 的统计能力边界与 OLAP 补位的落地路径

SelectDB技术团队

摘要:云上日志平台常见的演进路径是"先用 ELK 扛全部负载,遇到分析瓶颈再拆分"。本文给出判断边界与落地方案:先明确 ELK 能做什么、在哪四类诉求上吃力,再...

13510

云上日志方案怎么选:Loki、ELK 与统一分析引擎的成本账与落地口径

SelectDB技术团队

日志方案的成本主要由两部分构成:索引开销与存储开销。Loki 把成本压在存储侧——只索引标签、正文压缩后进对象存储;ELK 把成本投在索引侧——全字段倒排。两者...

17410

Elasticsearch 终于能在查询时 JOIN 了

岳涛

腾讯云TDP | 官方产研 (已认证)

本文描述问题及解决方法同样适用于 腾讯云 Elasticsearch Service(ES)。

3893537
领券