前言 kafka是目前企业中很常用的消息队列产品，可以用于削峰、解耦、异步通信。特别是在大数据领域中应用尤为广泛，主要得益于它的高吞吐量、低延迟，在我们公司的解决方案中也有用到。既然kafka在企业中

Kafka是一款非常优秀的开源消息引擎，以消息吞吐量高、可动态扩容、可持久化存储、高可用特性，以及完善的文档和社区支持成为目前最流行消息队列中间件。本文从Kafka设计理念、架构到实现等进行深入解读。

距离上次学习Kafka（Kafka——基础知识）已经有一段时间了，这次重新复习一遍，并且把一些遗漏的知识点补上。 由于生产者生产的消息会不断追加到 log 文件末尾，为防止 log 文件过大导致数据定位效率低下，Kafka 采取了分片和索引机制，将每个 partition 分为…

在我过去的工作经历中，经历过类似服务的有Redis集群，ElasticSearch集群，虽然整体改造后并不一定将成本降到最低，但是可以将服务的可用性和可靠性提高很多，而且根据业务场景以及使用方式来规划集群后会使得整体的边际成本呈递减状态。 笔者目前所处的团队所管理的kafka集…

kafka是近年来关注度飞速上升并得到越来越广泛应用的一个产品，本文将介绍一下它的实现原理以及在我们邮箱服务中的应用。 1、流式记录的发布和订阅：类似于消息系统。 2、存储：在一个分布式、容错的集群中安全持久化地存储流式数据。 3、处理：编写流处理应用程序，对实时事件进行响应。…