前言 kafka集群是由多个broker节点组成，这里面包含了许多的知识点，以下的这些问题你都知道吗? 你知道topic的分区leader是怎么选举的吗？ 你知道zookeeper中存储了kafka的

大家好，我是云祁。 有人说世界上有三个伟大的发明：火，轮子，以及 Kafka。 发展到现在，Apache Kafka 无疑是很成功的，Confluent 公司曾表示世界五百强中有三分之一的企业在使用

Kafka高性能主要体现在以下几方面，Producer发送消息：批量发送、压缩消息、内存池复用；Broker持久化：分区、顺序写、PageCache;Consumer:pull模式、mmap、零拷贝

概述 Kafka架构如下，主要由 Producer、Broker、Consumer 三部分组成。一条消息从生产到消费完成这个过程，可以划分三个阶段，生产阶段、存储阶段、消费阶段。 生产阶段: 在这个阶

分布式消息队列nsq，简单易用，去中心化的设计使nsq更健壮，nsq充分利用了go语言的goroutine和channel来实现的消息处理，代码量也不大，读不了多久就没了。后期的文章我会把nsq的源码分析给大家看。 分析nsq的整体框架结构，分析如何做到的无中心化分布式拓扑结构…

消息丢失和消息重复消费这两个情况，相信是业务工程师在使用 Kafka 的时候最害怕的事情，今天我们就聊这两个问题。

1. 多副本数据同步策略 为了提高消息的可靠性，Kafka每个Topic的partition都有N个副本。这N个副本中，其中一个replica是Leader，其他都是Follower。在 Kafka 中追随者副本是不对外提供服务的，所有的请求都必须由领导者副本来处理。 而Fol…

对快速理解 Kafka 原理和工程模型很有帮助

Kafka 是由 Linkedin 公司开发的，它是一个分布式的，支持多分区、多副本，基于 Zookeeper 的分布式消息流平台，它同时也是一款开源的基于发布订阅模式的消息引擎系统。 消息：Kafka 中的数据单元被称为消息，也被称为记录，可以把它看作数据库表中某一行的记录。…