apache-kafka - Strimzi kafka 出口商 kafka_consumergroup_members 指标

Question

我使用 Strimzi 操作符在 Kubernetes 上部署了一个带有消费者和生产者客户端的 kafka 集群。我使用了以下 srimzi 部署文件， https://github.com/strimzi/strimzi-kafka-operator/blob/main/examples/metrics/kafka-metrics.yaml

我正在使用 Kafka 导出器来监控与消费者相关的指标（每个主题每秒输入/输出的消息、消费者组的滞后、偏移量等）。但是，我有兴趣将 Prometheus 配置为抓取 kafka_exporter 指标“ kafka_consumergroup_members”，以便稍后在 Grafana 上显示。我应该在 strimzi Prometheus 配置文件（https://github.com/strimzi/strimzi-kafka-operator/blob/main/examples/metrics/prometheus-install/prometheus-rules.yaml）或任何其他配置文件中添加什么额外配置部署文件（例如，https://github.com/strimzi/strimzi-kafka-operator/blob/main/examples/metrics/kafka-metrics.yaml），以便从 kafka_exporter 指标中抓取“kafka_consumergroup_members”。

Answer 1

Kafka Exporter 是一个单独的工具，它提供 Kafka 本身未提供的其他指标。它提供的指标是不可配置的 - 您只能限制它将显示指标的主题/消费者组。

因此，Kafka Exporter 支持的所有指标都发布在其指标端点上，并且当 Prometheus 对它们进行转义时，它应该将所有指标都刮掉。因此，如果您的 Prometheus 中有其他 KAfka Exporter 指标，那么您应该也已经有了这个（实际上您需要有一些活跃的消费者组才能显示出来）。