kafka中文社区

每年Gartner都会对当前热点趋势进行追踪，并且探究其背后所依赖的技术，并通过将未来发展趋势与新兴技术作结合，将新兴技术划分成了三个雷达象限： 界面和体验：从根本上改变我...

在整个集群运行过程中，只能有一个Broker成为Controller。所以要监控Controller的数量以及Controller的变更历史。 可以用Kafka的JMXTo...

（一）在Kafka2.2之前 网络处理模型：Kafka Server在启动时会初始化SocketServer、KafkaApis和KafkaRequestHandlerPo...

（一）Broker如何成为Controller 最先在Zookeeper上创建临时节点/controller成功的Broker就是Controller。 源码路径(Kafk...

我们经常说，控制器是起协调作用的组件，那么，这里的协调作用到底是指什么呢？总体来说控制器的职责大致可以分为 5 种：主题管理，分区重分配，Preferred leader选...

Controller，是Apache Kafka的核心组件。它的主要作用是在Apache Zookeeper的帮助下管理和协调控制整个Kafka集群。 集群中的任意一台Br...

​ 【背景】 业务同学通过公司内部的Kafka管控平台进行Topic创建完成之后,发现Topic命令不规范,再次通过Kafka管控平台进行Topic删除操作,恰好这时负责K...

​个人认为最好先跟随视频进行学习，总结一下收藏的视频资料： 1.kafka官网：Apache Kafka 2.尚硅谷kafka教程：尚硅谷Kafka教程(消息队列kafka...

随着应用的不断增多，数据日益孤岛化，访问困难，各种上云等更加剧了这种隔离。数据团队一直面临着在日益分散的环境中对各类数据进行实时快捷访问的持续压力。 面对这样的问题，有两个...

温馨提示: 如有排版问题可访问 ： Kafka的灵魂伴侣LogiKM(1)之集群的接入及相关概念讲解 前言 今天新开了专栏 :【Kafka的灵魂伴侣LogiKM】 前言 正...

​今天发了一篇浅读Gartner关于新兴技术曲线中Data Fabric的解读（https://t.zsxq.com/rbeeq7m），有些同学在问如何看懂这个曲线图，跟大...

🦌 提问： kafka的Topic的Configs：leader.replication.throttled.replicas 与follower.replication...

今天跟大家聊聊数据编织（Data Fabric）的概念 Gartner在2022年重要战略技术趋势中重点提到数据编织（Data Fabric）这个概念，本质上是在谈怎么实现...

​ 温馨提示: (如果觉得排版不是很方便看，可以点击下面链接访问 ) 【kafka运维】kafka-reassign-partitions.sh分区副本重分配、数据迁移、副...

背景 目前线上环境有200套kafka集群，且kafka的版本有0.10、2.0等版本。需要在不影响业务的情况下迁移到kafka2.5版本。 方案 结合目前Kafka集群的...

在这里插入图片描述 /cluster /cluster/id 持久数据节点 /controller_epoch 持久数据节点 /Controller 临时数据节点 /log...

1. 背景 2. 数据通道简介 异构数据的同步是公司很多业务的普遍需求，通道服务也就成为了一项基础服务。包括但不限于日志，Binlog同步到下游各类存储和引擎中，如HIVE...

前言 对于Java web服务通常都会使用spring-boot作为web基础框架，今天就从spring的角度分析一下kafka是如何注入到spring容器中并且如何使用的...

有人报案 最近技术群里面有几个同学碰到了 删除Topic的问题, 怎么样也删除不掉,然后我协助排查之后,就做个记录,写篇文章,大家在碰到这类型的问题的时候应该怎么去排查 收...

大家好,我是石臻臻,这是 「kafka专栏」 连载中的第「N」篇文章... 前几天有个群友问我: kafka如何修改优先副本？ 他们有个需求是, 想指定某个分区中的其中一个...