如何在 prometheus operator 的配置重新加载器错误中得到通知或提醒？

Question

我使用 prometheus operator 在 kubernetes 上部署监控堆栈。我想知道是否有办法知道配置重新加载器部署的配置是否失败。这对于使用配置重新加载器容器重新加载其配置的普罗米修斯和警报管理器资源非常有用。配置失败时。我们在容器中有一个日志，但我们可以根据失败的配置重新加载获得通知或警报吗？

Answer 1

Prometheus 公开了一个您可以抓取的 /metric 端点。特别是，有一个指标指示最后一次重新加载是否成功：

# HELP prometheus_config_last_reload_successful Whether the last configuration reload attempt was successful.
# TYPE prometheus_config_last_reload_successful gauge
prometheus_config_last_reload_successful 0

您可以使用它来提醒重新加载失败。

groups:
- name: PrometheusAlerts
  rules:
  - alert: FailedReload
    expr: prometheus_config_last_reload_successful == 0
    for: 5m
    labels:
      severity: warning
    annotations:
      description: Reloading Prometheus' configuration has failed for {{$labels.namespace}}/{{ $labels.pod}}.
      summary: Prometheus configuration reload has failed

如何在 prometheus operator 的配置重新加载器错误中得到通知或提醒？

How to get notified or alerted on config reloader error in prometheus operator?

kubernetes

prometheus

prometheus-alertmanager

prometheus-operator