随着公司业务的高速发展，字节跳动目前 HDFS 服务的规模已经到达“双 10”的级别：单集群节点 10 万台级别、单集群数据量达到 10EB 级别。

随着移动互联网的发展，数字化营销、个性化推荐、AR场景等业务场景为企业带来机遇的同时也提出了技术上的挑战，各企业开始采取实时化方式处理数据以此满足用户。但是，技术更新迭代快，代码研发周期长，人才招聘难

我们在使用Flink开发实时任务时，都会用到框架本身提供的DataStream API，这使得用户不能不用Java或者Scala甚至Python来编写业务逻辑；这种方式虽然灵活且表达性强，但对用户具有

持续创作，加速成长！这是我参与「掘金日新计划 · 6 月更文挑战」的第11天，点击查看活动详情 Logistics_Day07：实时增量ETL存储Kudu 01-[复习]-上次课程内容回顾 02-[了

持续创作，加速成长！这是我参与「掘金日新计划 · 6 月更文挑战」的第12天，点击查看活动详情 Logistics_Day08：实时增量ETL存储Kudu

用户规模达4.6亿，每天处理话单量超过400亿条。拥有如此庞大体量的中国联通，始终思考着一个问题，该如何提高服务水平，为客户提供更有针对性的服务。如今，中国联通已在海量数据汇集、加工、脱敏、加密等技术

摘要：Apache Flink是为分布式、高性能的流处理应用程序打造的开源流处理框架。摘要：Apache Flink是为分布式、高性能的流处理应用程序打造的开源流处理框架。

实现批处理的技术许许多多，从各种关系型数据库的sql处理，到大数据领域的MapReduce，Hive，Spark等等。这些都是处理有限数据流的经典方式。而Flink专注的是无限流处理，那么他是怎么做到

![file](https://p3-juejin.byteimg.com/tos-cn-i-k3u1fbpfcp/85161538b4f04df4bfc33354362bbdc1~tplv-k3u