概述 Kafka集群的基本安装过程 架构 基于本地环境的配置 Java：jdk21 虚拟机： 7台 （Broker： 3， Controller： 3 / 监控VM： prometheus， graf

因此，在生产环境中，这种认证方式不符合实际业务场景，不利于后期扩展。然而使用SCRAM认证，可以动态新增用户，添加用户后，可以不用重启正在运行的Kafka集群即可进行鉴权。所以生产环境推荐使用SCRA

持续创作，加速成长！这是我参与「掘金日新计划 · 10 月更文挑战」的第1天，点击查看活动详情 Zookeeper系列笔记，带你入门到精通 概述 最近项目应客户要求Zookeeper需要认证，只有认证

玩转分布式流处理组件Kafka之基础理论篇，理论+实战中学习Kafka，并结合实际工作中的使用场景进行调优分析

背景 kafka在KIP-500引入了KRaft替代Zookeeper来实现自我管理元数据 详细信息可以看原文链接 KIP-500 KRaft简介 KRaft是kafka用来取代zookeeper的分

本文介绍了kafka基本概念，使用docker-compsoe部署kafka集群的方法，也对必要的启动参数作了说明。

版本选择 使用 docker-compose 部署 Kafka:3.5。 从 3.3 版本后，Kafka 引入了 KRaft 来替代 ZooKeeper，所以我们不必再部署 zk 了

Kafka 是一款高性能、高可靠性、可水平扩展的分布式消息队列系统，由 Apache 软件基金会开发和维护。它可以实现消息的异步处理和分布式计算，被广泛应用于大数据、实时数据流处理、监控报警等领域。

一般来说 Kafka 采用过期策略来清理日志，segment 文件达到一定时间或大小就会被删除，这样保证能够及时为新消息腾出空间。但事实上除了删除过期日志之外，Kafka 还有另外一种清理日志的方法，叫做日志紧缩（Log Compaction），本文介绍日志紧缩的相关内容。 1…