kafka运行在集群上，集群包含一个或多个服务器。kafka把消息存在topic中，每一条消息包含键值（key），值（value）和时间戳（timestamp）。 Producer - 消息生产者，就是向kafka broker发消息的客户端。 Consumer - 消息消费者…

1. Kafka的特点 消息系统：生存者消费者模型，先入先出（FIFO）。Partition内部是FIFO的，partition之间呢不是FIFO的，当然我们可以把topic设为一个partition，这样就是严格的FIFO。 持久化：可进行持久化操作。将消息持久化到磁盘，因此…

应大部分的小伙伴的要求，在Yarn之前先来一个kafka的小插曲，轻松愉快。 所以消息系统就是如上图我们所说的仓库，能在中间过程作为缓存，并且实现解耦合的作用。 引入一个场景，我们知道中国移动，中国联通，中国电信的日志处理，是交给外包去做大数据分析的，假设现在它们的日志都交给了…

本文主要介绍了Kafka基本知识，包含Topic、Partition、消费者、生产者、副本等基本概念，同时也介绍了Kafka版本变迁以及应用实战所必备的知识点，最后以“消息可靠性分析”结尾，加深理解。