面试官：今天我想问下，你觉得Kafka会丢数据吗？ 候选者：嗯，使用Kafka时，有可能会有以下场景会丢消息 候选者：比如说，我们用Producer发消息至Broker的时候，就有可能会丢消息 候选者

目录 思考几个问题 什么是分区状态机？ 创建Topic的时候如何选举Leader？ 分区的所有副本都不在线, 这个时候启动一台之前不在ISR内的副本

本文设置到的配置项有 名称 描述 类型 默认 num.partitions topic的默认分区数 int 1 log.dirs 保存日志数据的目录。如果未设置，则使用log.dir中的值 strin

Kafka 是由 Linkedin 公司开发的，它是一个分布式的，支持多分区、多副本，基于 Zookeeper 的分布式消息流平台，它同时也是一款开源的基于发布订阅模式的消息引擎系统。 消息：Kafka 中的数据单元被称为消息，也被称为记录，可以把它看作数据库表中某一行的记录。…

Kafka高质量专栏请看 石臻臻的杂货铺的Kafka专栏 说明 从2.2.4版开始，您可以直接在注释上指定Kafka使用者属性，这些属性将覆盖在使用者工厂中配置的具有相同名称的所有属性。您不能通过这种

本文主要从Binlog实时采集和离线处理Binlog还原业务数据两个方面，来介绍如何实现DB数据准确、高效地进入Hive数仓。 在数据仓库建模中，未经任何加工处理的原始业务层数据，我们称之为ODS(Operational Data Store)数据。在互联网企业中，常见的ODS…

在数据仓库建模中，未经任何加工处理的原始业务层数据，我们称之为ODS(Operational Data Store)数据。在互联网企业中，常见的ODS数据有业务日志数据（Log）和业务DB数据（DB）两类。对于业务DB数据来说，从MySQL等关系型数据库的业务数据进行采集，然后…

最近，想对MySQL有进一步的认识，看如何保证缓存与数据库一致性，在负责业务上也需要这方面的优化，有些文章提到使用监听MySQL binlog实现，想试下，本文纯属好奇心驱使。 binlog是MySQL server层维护的一种二进制日志，与innodb等存储引擎中的redo/…

本教程将介绍如何在 Spring Boot 应用程序中使用 Kafka。Kafka 是一个分布式的发布-订阅消息系统，它可以处理大量数据并提供高吞吐量。 在本教程中，我们将使用 Spring Boot