prometheus - 如何让 Prometheus 根据 Alert 标签向两个不同的 Alertmanagers 发送 Alerts？

Question

我有以下两个警报：

alert: InstanceDown
expr: (up == 0) and (team == "foo")
for: 5m
labels:
  severity: page
  team: foo
annotations:
  summary: "Instance {{$labels.instance}} down"

alert: InstanceDown
expr: (up == 0) and (team == "bar")
for: 5m
labels:
  severity: page
  team: bar
annotations:
  summary: "Instance {{$labels.instance}} down"

如何让 Prometheus 将第一个警报发送到暴露于的一个警报管理器，alertmanager.example.com/team-foo然后将第二个警报发送到暴露于的另一个警报管理器alertmanager.example.com/team-bar？

我想我需要使用服务发现和重新标记，但还不能走得更远。

如果重要的话，我正在使用 prometheus-operator。

Answer 1

我认为您无法过滤哪些警报发送到哪个 Alertmanager。但是，您可以将所有警报发送到 2 个（或 N 个）Alertmanager 实例，并将每个 Alertmanager 配置为路由一些警报并忽略所有其他警报（即，将它们路由到指定的接收者，没有电子邮件，没有 Slack，没有任何东西）。