主要观点：AlertManager 是 Prometheus 中用于警报的可靠方法，本文介绍了在 Kubernetes 上使其高可用的方法及相关内容。
关键信息：

• AlertManager 是简单的 Go 应用，易部署和配置，是 Prometheus 工具集的警报部分，接收 Prometheus 的警报并推送到配置的通知渠道。
• 高可用对生产系统重要，AlertManager 有高可用模式，通过 Memberlist 的八卦协议同步多个实例。
• 在 Kubernetes 中，由于 Pod 是短暂的且 IP 会变化，导致 AlertManager 高可用配置出现问题，如静态的 --cluster.peer 标志和连接失败等。
• 解决方案是在 AlertManager Pod 上使用 init 容器，通过查询 Kubernetes API 获取相同部署哈希的 Pod 的 IP，写入 --cluster.peer 标志文件供 AlertManager 使用。
• 需注意滚动更新时的奇怪行为，以及服务账户要有查询 Kubernetes API 的权限，还可使用 pod 反亲和性规则在多节点集群中分布 AlertManager 实例。
• Prometheus 应配置为发送到所有 AlertManager 实例，Kubernetes 中可使用 ClusterIP 服务暴露所有实例给 Prometheus。
  重要细节：
• 介绍了 AlertManager 在监控堆栈中的工作流程，包括 Prometheus 抓取指标、触发警报到 AlertManager、AlertManager 决定发送渠道等。
• 展示了相关的 Kubernetes 资源定义，如 Deployment、ClusterRole、ServiceAccount 等的配置示例。
• 提供了 Python Discord 项目中 AlertManager 和 Prometheus 配置的完整示例仓库链接。