近段时间，业务系统架构基本完备，数据层面的建设比较薄弱，因为笔者目前工作重心在于搭建一个小型的数据平台。优先级比较高的一个任务就是需要近实时同步业务系统的数据（包括保存、更新或者软删除）到一个另一个数据源，持久化之前需要清洗数据并且构建一个相对合理的便于后续业务数据统计、标签系…

系统运行过程中日积月累产生大量业务数据，并且查询条件也随着业务细分更加精细。通过传统关系型数据库查询严重拖慢系统响应速度，尤其是模糊查询时更是力不从心。

「这是我参与2022首次更文挑战的第3天，活动详情查看：2022首次更文挑战」。 MySQL主备复制原理 MySQL master 将数据变更写入二进制日志( binary log, 其中记录叫做二进

简介 canal 翻译为管道，主要用途是基于 MySQL 数据库的增量日志 Binlog 解析，提供增量数据订阅和消费。 基于日志增量订阅和消费的业务包括 数据库镜像； 数据库实时备份； 索引构建和实

在Java开发工程师面试中，特别是涉及到Apache Kafka的部分，面试官可能会从基础知识、架构理解、实际应用、故障排查和性能优化等多个维度来考察您的能力。这篇文章会将一些大概率被问到的面试题目梳