Kafka集群接入Prometheus、Grafana监控本文将指导您如何配置 Kafka 集群的监控系统，使用 Pro

前言

本文将指导您如何配置 Kafka 集群的监控系统，使用 Prometheus 和 Grafana 进行数据可视化。该过程包括安装 Kafka exporter、配置 Prometheus 和 Grafana，以便有效监控 Kafka 集群的性能和状态。

环境准备

一定要注意各个组件的版本对应问题，博文在这方面吃了大亏，浪费了很多时间。

特别是 Grafana 版本与 kafka-exporter 版本不能过高，不然不兼容，图标数据不展示

Prometheus版本: v2.36.2
Grafana版本: 9.1.2
Kafka版本: 2.5.0
Kafka-exporter版本: v1.0.0

环境准备可参考我的博文：

# Docker 安装 Prometheus 和 Grafana

# 最详细且简单的kafka集群搭建教程

安装`kafka-exporter`

进入到安装kafka exporter的目录

创建docker-compose.yaml文件，内容如下：

注意：--kafka.server的内容替换为自己集群的IP端口

version: '3.8'

services:
  kafka-exporter:
    image: danielqsj/kafka-exporter:v1.0.0
    container_name: kafka-exporter
    ports:
      - "9308:9308"
    command: ["--kafka.server=10.0.0.87:9092","--kafka.server=10.0.0.81:9092","--kafka.server=10.0.0.82:9092"]
    restart: always
    volumes:
      - /etc/localtime:/etc/localtime
    deploy:
      resources:
        limits:
          memory: 4g

执行命令启动kafka-exporter服务
```
docker-compose up -d
```

配置`Prometheus`

编辑prometheus.yaml配置文件，scrape_configs块下新增如下内容：
注意：
1. 缩进格式保持一致
2. targets里面的内容替换为自己kafka-exporter的IP端口
```
    - job_name: "kafka_exporter"
      static_configs:
        - targets: ["10.0.0.87:9308"]
```
重启prometheus服务

也可以采用热加载配置文件的方式：curl -XPOST localhost:9090/-/reload
验证prometheus中是否可以查看到kafka相关的信息