如何监控 Elasticsearch 集群健康状态 #

简介 #

很多时候 Elasticsearch 集群会因为某些原因，集群健康状态会变为红色，这个时候 Elasticsearch 集群至少存在一个主分片未分配或者丢失。所以监控 Elasticsearch 集群健康状态是很有必要的。本文将介绍如何使用 INFINI Console 告警功能监控 Elasticsearch 集群健康状态。

准备 #

下载并安装最新版 INFINI Console
使用 INFINI Console 注册 Elasticsearch 集群

创建告警规则 #

在浏览器中打开 INFINI Console, 点击左侧菜单 告警管理 > 规则管理 进入告警管理页，然后点击 新建 按钮进入创建告警规则页。按以下步骤创建告警规则：

选择集群（这里需要选择 INFINI Console 存储数据的 Elasticsearch 集群，也就是在配置文件 console.yml 配置的 Elasticsearch 集群，如果没有注册到 INFINI Console , 请先注册）
选择告警对象 .infini_metrics（选择 Elasticsearch 集群下的索引，或者输入索引 pattern, 这里因为 INFINI Console 采集的监控数据存放在索引 .infini_metrics 里面）
输入筛选条件（Elasticsearch 查询 DSL）这里我们需要过滤监控指标类别为 cluster_health，并且健康状态为红色的数据，DSL 如下：

{
  "bool": {
    "must": [
      {
        "match": {
          "payload.elasticsearch.cluster_health.status": "red"
        }
      },
      {
        "term": {
          "metadata.name": {
            "value": "cluster_health"
          }
        }
      }
    ]
  }
}

选择时间字段和统计周期用于做 date histogram 聚合

alerting rule settings

输入规则名称
分组设置（可选，可配置多个），当统计指标需要分组的时候设置，由于所有注册到 INFINI Console 的 Elasticsearch 集群监控指标都存储在索引 .infini_metrics 里面，所以需要根据集群 ID 分组，这里我们选择 metadata.labels.cluster_id
配置告警指标，选择聚合字段 payload.elasticsearch.cluster_health.status，统计方法 count
配置告警条件，配置 持续一个周期 聚合结果大于等于 1，即触发 Critical 告警
设置执行周期，这里配置一分钟执行一次检查
设置事件标题，事件标题是一个模版，可以使用模版变量，模版语法及模版变量用法参考这里
设置事件内容，事件内容是一个模版，可以使用模版变量，模版语法及模版变量用法参考这里

alerting rule settings