同时，也欢迎关注我的微信公众号 AlwaysBeta，更多精彩内容等你来。 在 0.9.0.0 之后的 Kafka，出现了几个新变动，一个是在 Server 端增加了 GroupCoordinator 这个角色，另一个较大的变动是将 topic 的 offset 信息由之前存储…

从两个令人费解的问题开始，详细讲述消费者初始化过程，消费者拉取消息的流程、核心设计理念。深入源码，了解其设计思想和实现方式。

前言 kafka是目前企业中很常用的消息队列产品，可以用于削峰、解耦、异步通信。特别是在大数据领域中应用尤为广泛，主要得益于它的高吞吐量、低延迟，在我们公司的解决方案中也有用到。既然kafka在企业中

对于我这个kafka只懂点鸡毛蒜皮的弱鸡，唯一的办法就是网上各种搜。以下是我在解决问题中有帮助的博文： 可以获取到几个关键的参数max.poll.interval.ms，max.poll.records以及session timeout。这段日志的简单翻译就是 因为一个topi…

前言 消息的消费一般有两种模式，推模式和拉模式。推模式是服务端主动将消息推送给消费者，而拉模式是消费者主动向服务端发起请求来拉取消息。kakfa采用的是拉模式，这样可以很好的控制消费速率。那么kafk

各类消息中间件对顺序消息实现的做法是将具有顺序性的一类消息发往相同的主题分区中，只需要将这类消息设置相同的Key即可，而Kafka会在任意时刻保证一个消费组同时只能有一个消费者监听消费，因此可在消费时

摘要：Kafka中的位移是个极其重要的概念，因为数据一致性、准确性是一个很重要的语义，我们都不希望消息重复消费或者丢失。而位移就是控制消费进度的大佬。本文就详细聊聊kafka消费位移的那些事，包括：概

KafkaConsumer(消费者)每次调用 poll()方法，它总是返回由生产者写入 Kafka但还没有被消费者读取过的记录， 我们因 此可以追踪到哪些记录是被群组里的哪个消费者读取的。之前已经讨论过， Kafka 不会像其他 JMS 队列那样需要得到消费者的确认，这是 Ka…

一、前言 前面的 Kafka 系列文章，我们讲过一篇：聊聊 Kafka： Consumer 源码解析之 ConsumerNetworkClient，那一篇主要讲的是 KafkaConsumer 类以及