ES05# Elasticsearch节点指标梳理
引言
节点状态GET _nodes/stats，简单的命令返回大量的指标信息，本文就一探究竟拨开主要指标的含义，文章主要内容有：
节点信息说明 操作指标说明 缓存&事务&恢复指标
1.节点数量
"_nodes" : {
"total" : 33,
"successful" : 33,
"failed" : 0
}
指标说明：
| 属性 | 说明 |
|---|---|
| _nodes.total | 集群的节点数量 |
| _nodes.successful | 正确响应的节点数量 |
| _nodes.failed | 失败响应的节点数量 |
2.IP&角色&属性
"nodes" : {
"fSoa6g9FQNWOD1upVGrJUg" : {
"timestamp" : 1650288221571,
"name" : "elastic-log-xxx-xxx-es-data-7",
"transport_address" : "x.x.x.x:9300",
"host" : "x.x.x.x",
"ip" : "x.x.x.x:9300",
"roles" : [
"data_content",
"data_hot",
"ingest"
],
"attributes" : {
"k8s_node_name" : "cn-hangx.x.x.x.x",
"xpack.installed" : "true",
"transform.node" : "false"
}
//...
}
//...
}
指标说明：
| 属性 | 说明 |
|---|---|
| timestamp | 收集指标的时间戳 |
| name | 节点名称 |
| transport_address | 集群内部通信地址端口 |
| host | host地址 |
| IP | IP+端口 |
| roles | 该节点被赋予的角色 |
| attributes | 节点属性信息 |
3.文档数量与存储
"indices" : {
"docs" : {
"count" : 1096432845,
"deleted" : 286918
},
"store" : {
"size_in_bytes" : 543284041812,
"reserved_in_bytes" : 0
},
// ...
}
指标说明：
| 属性 | 说明 |
|---|---|
| docs.count | 该节点存储的文档数量 |
| docs.deleted | 该节点删除的文档数量 |
| store.size_in_bytes | 该节点分片存储大小 |
| store.reserved_in_bytes | 预测恢复快照将增长多少 |
1. 索引操作
"indexing" : {
"index_total" : 22717470659,
"index_time_in_millis" : 8039662582,
"index_current" : 11,
"index_failed" : 0,
"delete_total" : 390,
"delete_time_in_millis" : 587,
"delete_current" : 0,
"noop_update_total" : 0,
"is_throttled" : false,
"throttle_time_in_millis" : 0
}
指标说明：
| 属性 | 说明 |
|---|---|
| index_total | 该节点索引操作总次数 |
| index_time_in_millis | 该节点索引操作总的耗时 |
| index_current | 该节点当前正在执行索引操作的个数 |
| index_failed | 该节点索引操作执行失败的个数 |
| delete_total | 该节点索引删除操作的总数 |
| delete_time_in_millis | 该节点索引删除操作的总耗时 |
| delete_current | 该节点当前正在执行索引删除操作的个数 |
| noop_update_total | 该节点空操作（更新）的总数 |
| is_throttled | 是否被限流 |
| throttle_time_in_millis | 限流操作所耗用的时间 |
2.Get操作指标
返回示例：
"get" : {
"total" : 217898,
"time_in_millis" : 24594,
"exists_total" : 211213,
"exists_time_in_millis" : 24306,
"missing_total" : 6685,
"missing_time_in_millis" : 288,
"current" : 0
}
指标说明：
| 属性 | 说明 |
|---|---|
| total | 该节点Get操作总次数 |
| time_in_millis | 该节点Get操作总的耗时 |
| exists_total | 该节点Get操作成功总次数 |
| exists_time_in_millis | 该节点Get操作成功总耗时 |
| missing_total | 该节点Get操作失败总次数 |
| missing_time_in_millis | 该节点Get操作失败总耗时 |
| current | 该节点当前正在执行Get操作的数量 |
3.Search操作指标
返回示例：
"search" : {
"open_contexts" : 0,
"query_total" : 2810350,
"query_time_in_millis" : 37625703,
"query_current" : 0,
"fetch_total" : 1386124,
"fetch_time_in_millis" : 15092328,
"fetch_current" : 0,
"scroll_total" : 122754,
"scroll_time_in_millis" : 1515856,
"scroll_current" : 0,
"suggest_total" : 0,
"suggest_time_in_millis" : 0,
"suggest_current" : 0
}
指标说明：
| 属性 | 说明 |
|---|---|
| open_contexts | 该节点打开查询上下文总的数量 |
| query_total | 该节点Query操作总的数量 |
| query_time_in_millis | 该节点Query操作总的耗时 |
| query_current | 该节点当前正在运行的Query操作数量 |
| fetch_total | 该节点fetch操作总的数量 |
| fetch_time_in_millis | 该节点fetch操作总的耗时 |
| fetch_current | 该节点当前运行fetch操作的数量 |
| scroll_total | 该节点scroll操作总的数量 |
| scroll_time_in_millis | 该节点scroll操作总的耗时 |
| scroll_current | 该节点当前运行scroll操作的数量 |
| suggest_total | 该节点suggest操作总的数量 |
| suggest_time_in_millis | 该节点suggest操作总的耗时 |
| suggest_current | 该节点当前运行suggest操作的数量 |
4.Merges操作指标
返回示例：
"merges" : {
"current" : 8,
"current_docs" : 17109224,
"current_size_in_bytes" : 9829070126,
"total" : 3074176,
"total_time_in_millis" : 10028444483,
"total_docs" : 96464444178,
"total_size_in_bytes" : 47030059786323,
"total_stopped_time_in_millis" : 11215,
"total_throttled_time_in_millis" : 6133172861,
"total_auto_throttle_in_bytes" : 72584133625
}
指标说明：
| 属性 | 说明 |
|---|---|
| current | 该节点正在运行merge操作的数量 |
| current_docs | 该节点正在运行merge文本的数量 |
| current_size_in_bytes | 该节点正在运行merge文本占用的内存大小 |
| total | 该节点merge操作总的数量 |
| total_time_in_millis | 该节点merge操作总的耗时 |
| total_docs | 该节点merge文档总的数量 |
| total_size_in_bytes | 该节点merge文档总的大小 |
| total_stopped_time_in_millis | 该节点merge操作停止总的时间 |
| total_throttled_time_in_millis | 该节点merge操作限流总的耗时 |
| total_auto_throttle_in_bytes | 超过该阈值自动触发merge操作限流 |
5.refresh操作指标
返回示例：
"refresh" : {
"total" : 15285785,
"total_time_in_millis" : 738659952,
"external_total" : 15153381,
"external_total_time_in_millis" : 758721356,
"listeners" : 0
}
指标说明：
| 属性 | 说明 |
|---|---|
| total | 该节点refresh操作总的数量 |
| total_time_in_millis | 该节点refresh操作总的耗时 |
| external_total | 该节额外refresh操作总的数量 |
| external_total_time_in_millis | 该节额外refresh操作总的耗时 |
| listeners | 该节refresh listeners的数量 |
6.flush操作指标
返回示例：
"flush" : {
"total" : 90832,
"periodic" : 50676,
"total_time_in_millis" : 71006569
}
指标说明：
| 属性 | 说明 |
|---|---|
| total | 该节点flush刷盘操作总的次数 |
| periodic | 该节点周期性触发flush刷盘操作的次数 |
| total_time_in_millis | 该节点flush刷盘操作总的耗时 |
7.warmer操作指标
返回示例：
"warmer" : {
"current" : 0,
"total" : 1186361,
"total_time_in_millis" : 45855
}
指标说明：
| 属性 | 说明 |
|---|---|
| current | 该节点正在运行预热索引的数量 |
| total | 该节点总共预热索引的数量 |
| total_time_in_millis | 该节点总共预热索引的耗时 |
1.query_cache指标
返回示例：
"query_cache" : {
"memory_size_in_bytes" : 11514288,
"total_count" : 21172337,
"hit_count" : 7241011,
"miss_count" : 13931326,
"cache_size" : 78,
"cache_count" : 26881,
"evictions" : 26803
}
指标说明：
| 属性 | 说明 |
|---|---|
| memory_size_in_bytes | 查询缓存占用总的大小 |
| total_count | 查询缓存总的次数（包括命中+未命中） |
| hit_count | 查询缓存命中的次数 |
| miss_count | 查询缓存未命中的次数 |
| cache_size | 当前查询缓存中文档的数量 |
| cache_count | 查询缓存中总的文档的数量 |
| evictions | 查询缓存中被驱逐的数量 |
2.translog指标
返回示例：
"translog" : {
"operations" : 22091013,
"size_in_bytes" : 25272012418,
"uncommitted_operations" : 22091013,
"uncommitted_size_in_bytes" : 25272012418,
"earliest_last_modified_age" : 0
}
指标说明：
| 属性 | 说明 |
|---|---|
| operations | transaction log操作次数 |
| size_in_bytes | transaction log的大小 |
| uncommitted_operations | 未提交transaction操作的数量 |
| uncommitted_size_in_bytes | 未提交transaction日志的大小 |
| earliest_last_modified_age | transaction日志存的最久的日志条目时间 |
3.request_cache指标
返回示例：
"request_cache" : {
"memory_size_in_bytes" : 151103,
"evictions" : 0,
"hit_count" : 22922,
"miss_count" : 42233
}
指标说明：
| 属性 | 说明 |
|---|---|
| memory_size_in_bytes | 请求缓存的大小 |
| evictions | 请求缓存被驱逐的数量 |
| hit_count | 请求缓存的命中数量 |
| miss_count | 请求缓存的未命中数量 |
4.recovery指标
返回示例：
"recovery" : {
"current_as_source" : 0,
"current_as_target" : 0,
"throttle_time_in_millis" : 272139765
}
指标说明：
| 属性 | 说明 |
|---|---|
| current_as_source | 源索引分片恢复操作的数量 |
| current_as_target | 目标引分片恢复操作的数量 |
| throttle_time_in_millis | 恢复操作的延迟时长 |
备注：其他fielddata、completion、segments以及系统、jvm等指标在上一篇已梳理，不再重复。
评论