Kafka、RocketMQ 与 RabbitMQ 核心概念深度对比
一、核心概念解析
1. Kafka 核心概念
- Topic（主题）
消息的逻辑分类，支持多个分区（Partition），每个分区是一个有序的、不可变的消息队列。
- Partition（分区）
实现 Topic 的横向扩展和并行处理，消息在分区内按顺序存储。
- Producer（生产者）
向 Topic 的指定分区发送消息，支持批量发送和消息压缩。
- Consumer（消费者）
通过消费者组（Consumer Group）订阅 Topic，每个分区仅由一个消费者消费。
- Broker（代理）
Kafka 集群节点，管理分区的存储和副本同步。
- ZooKeeper
管理集群元数据（如 Broker、Topic、分区信息）。
2. RocketMQ 核心概念
- Topic（主题）
消息的逻辑分类，支持多个队列（Queue），每个队列是一个有序的消息集合。
- Queue（队列）
Topic 的物理分片，类似 Kafka 的分区，队列内消息有序。
- Producer（生产者）
支持同步发送、异步发送和事务消息，确保消息可靠性。
- Consumer（消费者）
支持集群消费（负载均衡）和广播消费（全量推送）。
- Broker（代理）
分为 Master（读写节点）和 Slave（备份节点），通过主从复制实现高可用。
- NameServer（命名服务）
轻量级注册中心，管理 Broker 和 Topic 的路由信息。
- Tag（标签）
消息的二级分类，用于精细化消息过滤。
3. RabbitMQ 核心概念
- Exchange（交换机）
接收生产者发送的消息，并根据路由规则将消息分发到队列。
- Queue（队列）
消息的存储单元，消费者从队列订阅消息。
- Producer（生产者）
将消息发送到交换机，不直接与队列交互。
- Consumer（消费者）
从队列消费消息，支持消息确认机制（ACK）。
- Broker（代理）
RabbitMQ 服务实例，管理交换机、队列和绑定关系。
- Virtual Host（虚拟主机）
逻辑隔离单元，不同虚拟主机的资源（交换机、队列）相互独立。
- Binding Key（绑定键）
定义交换机与队列之间的路由规则（如直连、主题、扇出等）。
二、核心机制对比
1. 消息模型
- Kafka
基于发布-订阅模型，支持多消费者组并行消费同一 Topic。
- RocketMQ
发布-订阅模型，支持 Tag 过滤和顺序消息。
- RabbitMQ
支持点对点（单队列单消费者）和发布-订阅（通过交换机路由到多队列）。
2. 消息持久化
- Kafka
所有消息持久化到磁盘，通过分段日志（Segment Log）和零拷贝技术优化性能。
- RocketMQ
消息持久化到 Commit Log 文件，支持同步刷盘和异步刷盘。
- RabbitMQ
消息可持久化到磁盘（需设置队列为持久化），但默认以内存存储为主。
3. 高可用与副本机制
- Kafka
通过 ISR（In-Sync Replicas）机制实现多副本同步，副本间数据强一致。
- RocketMQ
主从异步复制（Master-Slave），支持故障自动切换（需手动配置）。
- RabbitMQ
通过镜像队列（Mirrored Queue）实现主从复制，但配置复杂度较高。
4. 消息顺序性
- Kafka
仅保证分区（Partition）内消息有序，全局无序。
- RocketMQ
保证队列（Queue）内消息有序，全局无序。
- RabbitMQ
单个队列内消息有序，但多消费者场景下无法保证顺序。
5. 消息路由
- Kafka
无原生路由功能，需通过分区策略（如 Hash、Range）间接实现。
- RocketMQ
支持 Tag 过滤和 SQL 表达式过滤。
- RabbitMQ
提供多种交换机类型（直连、主题、扇出、头匹配），支持灵活路由规则。
6. 事务支持
- Kafka
支持生产者事务（确保消息原子性写入多个分区）。
- RocketMQ
支持事务消息（两阶段提交），确保业务操作与消息发送的一致性。
- RabbitMQ
无原生事务消息，需通过确认机制和死信队列模拟事务。
