面试官：今天我想问下，你觉得Kafka会丢数据吗？ 候选者：嗯，使用Kafka时，有可能会有以下场景会丢消息 候选者：比如说，我们用Producer发消息至Broker的时候，就有可能会丢消息 候选者

Kafka介绍 大家都知道 Kafka 的整个架构非常简洁，是分布式的架构，主要由 Producer、Broker、Consumer 三部分组成，后面剖析丢失场景会从这三部分入手来剖析。 消息传传递语

1. Producer 生产者 2. Consumer 消费者 3. Broker 独立的 Kafka 服务器 4. Topic 主题 5. Partition 分区 6. Replicas 副本 7. Offset 偏移量 1. Partition 2. Consumer 1…

我的上家公司是做餐饮系统的，每天中午和晚上用餐高峰期，系统的并发量不容小觑。为了保险起见，公司规定各部门都要在吃饭的时间轮流值班，防止出现线上问题时能够及时处理。 我当时在后厨显示系统团队，该系统属于订单的下游业务。用户点完菜下单后，订单系统会通过发kafka消息给我们系统，系…

此处简单记录一下 SpringBoot 和 Kafka 的整合。 |- manual_immediate: 表示手动提交，当调用 Acknowledgment#acknowledge之后立马提交。 1、消费的发送使用KafkaTemplate 。 2、根据发送的结果知道，消息发…

介绍完kafka的基本概念之后一篇文章让你快速上手Kafka，接下来说说Kafka的配置，Kafka涉及很多配置选项，涉及安装和调优的方方面面。不过大多数调优选项可以使用默认配置，除非对调优有特别的要求 一个单机的kafka服务器称为broker，每个broker都需要一个标识…

由于kafka强依赖于zookeeper，所以需先搭建好zookeeper集群。由于zookeeper是由java编写的，需运行在jvm上，所以首先应具备java环境。 （ps3：人啊，就是要条理。东边放一点，西边放一点，过段时间就不知道自己装在哪里了。本教程所有下载均放在/u…

日志收集：一个公司可以用Kafka收集各种服务的log，通过kafka以统一接口服务的方式开放给各种consumer，例如hadoop、Hbase、Solr等。 消息系统：解耦和生产者和消费者、缓存消息等。 用户活动跟踪：Kafka经常被用来记录web用户或者app用户的各种活…

前段时间接到用户要求，调整某个主题在 Kafka 集群消息大小为 4M。 根据 Kafka 消息大小规则设定，生产端自行将 max.request.size 调整为 4M 大小，Kafka 集群为该主题设置主题级别参数 max.message.bytes 的大小为 4M。 以上…