是雨声

随着数据库中数据量日益增多，不得进行分库分表，在分库后将数据分布到不同的数据库实例（甚至物理机器）上，以达到降低数据量，提供系统的处理能力，但是这种架构也带来其他问题，比如...

前文讲了一个利用滑动窗口思想的题目“无重复字符的最长子串” https://juejin.cn/post/70271136...

大家好，我是 yes。 这是Kafka源码分析第四篇文章，今天来说说 Kafka控制器，即 Kafka Controller。 源码类的文章在手机上看其实效果很差，这篇文章...

一、kafka概述1.1、定义Kakfa是一个分布式的基于发布/订阅模式的消息队列（messagequeue），主要应用于大数据的实时处理领域1.2、消息队列1.2.1、传...

1. 什么是控制器 控制器组件（Controller），是 Apache Kafka 的核心组件。它的主要作用是在 Apache ZooKeeper 的帮助下管理和协调整个...

本套系列博客从真实商业环境抽取案例进行总结和分享，并给出Spark商业应用实战指导，请持续关注本套博客。 为何惊出此言？内心惶恐。kafka的Producer是线程安全的，...

10亿请求电商平台 需求：电商平台，每天 10 亿请求发送到 Kafka 集群。 1. QPS 估算...

Kafka 如何实现高性能 IO？ 批处理：减少网络通信开销 利用操作系统 page cache 来缓存数...

控制器组件（Controller）：是 Apache Kafka 的核心组件 主要作用是：管理和帖调整个Kafka集群...

创建 Topic 时，Controller 如何实现 Leader 选举？ 删除 Topic 时，Controller 如何清理数据？...

Leader 跟 Follower 的 HW 和 LEO 如何更新？ Leader 切换时发生数据丢失问题 Leader 切换时发生数据不一致问题...

我们从producer、consumer、broker三个角度进行分析。 消息传输保障 一般而言，消息中间件的消息传输保障有 3 个层级 如下图所示： Kafka的消息传输...

Kafka 的 0.11.x 版本如何解决之前版本高水位机制的弊端? 高水位机制存在弊端有：Follower 副本的高水位更新需要一轮额外的拉取请求才能实现...