Flink 认为 **Batch 是 Streaming 的一个特例**，所以Flink 底层引擎是一个流式引擎，在上面实现了流处理和批处理

从其他工具同步MySQL的数据到Kafka中，通过flink消费Kafka的数据写入hdfs目录。hdfs目录需要根据具体数据动态生成，需要重写BucketAssigner实现

本文整理自Flink数据通道的Flink负责人、Flink CDC开源社区的负责人、Apache Flink社区的PMC成员徐榜江在云栖大会开源大数据专场的分享。

随着企业信息化程度的提升，数据之间的同步、交互成为了系统设计中不可或缺的一部分。尤其是在分布式系统中，数据同步的实时性和准确性至关重要。

前言 大家还记得双11得时候，会有一个大屏实时刷新显示交易金额，这究竟是怎么实时统计计算的呢？Apache Flink是一个开源、流行的大数据框架和分布式处理引擎，特别是针对流式数据的处理，那么今天通