RocketMq-消费方式

379 阅读3分钟

持续创作,加速成长!这是我参与「掘金日新计划 · 6 月更文挑战」的第24天,点击查看活动详情

两种消息消费方式

负载均衡模式(集群消费)

消费者采用负载均衡方式消费消息,一个分组(Group)下的多个消费者共同消费队列消息,每个消费者处理的消息不同。一个Consumer Group中的各个Consumer实例分摊去消费消息,即一条消息只会投递到一个Consumer Group下面的一个实例。例如某个Topic有3个队列,其中一个Consumer Group 有 3 个实例,那么每个实例只消费其中的1个队列。集群消费模式是消费者默认的消费方式。

图片14.png

代码演示

图片15.png

广播消费

图片16.png

广播消费模式中消息将对一个Consumer Group下的各个Consumer实例都投递一遍。即使这些 Consumer属于同一个Consumer Group,消息也会被Consumer Group 中的每个Consumer都消费一次。实际上,是一个消费组下的每个消费者实例都获取到了topic下面的每个Message Queue去拉取消费。所以消息会投递到每个消费者实例。

代码演示

图片17.png

消息消费时的权衡

负载均衡模式:适用场景注意事项

  1. 消费端集群化部署,每条消息只需要被处理一次。

  2. 由于消费进度在服务端维护,可靠性更高。

  3. 集群消费模式下,每一条消息都只会被分发到一台机器上处理。如果需要被集群下的每一台机器都处理,请使用广播模式。

  4. 集群消费模式下,不保证每一次失败重投的消息路由到同一台机器上,因此处理消息时不应该做任何确定性假设。

广播模式:适用场景&注意事项

  1. 每条消息都需要被相同逻辑的多台机器处理。

  2. 消费进度在客户端维护,出现重复的概率稍大于集群模式。

  3. 广播模式下,消息队列 RocketMQ 保证每条消息至少被每台客户端消费一次,但是并不会对消费失败的消息进行失败重投,因此业务方需要关注消费失败的情况。

  4. 广播模式下,客户端每一次重启都会从最新消息消费。客户端在被停止期间发送至服务端的消息将会被自动跳过,请谨慎选择。

  5. 广播模式下,每条消息都会被大量的客户端重复处理,因此推荐尽可能使用集群模式。

  6.  目前仅 Java 客户端支持广播模式。

  7. 广播消费模式下不支持顺序消息。

  8. 广播消费模式下不支持重置消费位点。

广播模式下服务端不维护消费进度,所以消息队列 RocketMQ 控制台不支持消息堆积查询、消息堆积报警和订阅关系查询功能。