消息队列

分布式协议 分布式协议是规则、约定。用以确保分布式系统中多个节点间通信、数据同步、备份一致性的方案。 这些协议的设计目标是确保系统在多个节点之间能够正确地协作，即使在存在网络延迟、节点故障或其他不确定

现象 某天线上持续告警消费堆积，从量级上看当天与之前并无太大区别，遂排除。 接着，从 kafka manager 看，该 topic 有 3 个分区，尾数 139 的 ip 消费了两个分区，尾数140

前言 我们在使用 kafka 过程中，经常遇到 重复消费、业务处理异常导致的消息丢失 ... 在 Kafka 中，offset 记录了我们目前消费的位置，重复消费、消息丢失等场景出现，本质与 offs

背景 使用延迟队列的场景非常多，支付超时关闭、用户签约超时、拼团失败取消等，延迟 15分分钟、30分钟 ... 实现延迟处理的手段很多： 定时任务扫描，到时间就处理 利用 Redis 队列，不断投递检

前言 Kafka消息积压的问题，核心原因是生产太快、消费太慢，处理速度长期失衡，从而导致消息积压（Lag）的场景，积压到超过队列长度限制，就会出现还未被消费的数据产生丢失的场景。 简单来说，之所以会产