上一篇我们主要通过一个简单的demo程序来展示了Flink是如何去实现数据流处理的。现在我们将跟着代码一起梳理一下FLink的工作流程。 对于图中的三个Task,每个Task对应执行了什么计算，完全可以和我们定义的任务的源码对应上,我也在源代码的注释中，用"//Task n"的…

TopN的常见应用场景，最热商品购买量，最高人气作者的阅读量等等。 1. 用到的知识点 2. 案例介绍 通过用户访问日志，计算最近一段时间平台最活跃的几位用户topN。 3. 数据源 这里通过随机数来扰乱username，便于使用户名大小不一，让结果更加明显。KafkaUtil…

💯大数据开发笔记系列： 1️⃣大数据开发笔记（一）：HDFS介绍 2️⃣大数据开发笔记（二）：Yarn分布式集群操作系统 3️⃣大数据开发笔记（三）：Mapreduce 4️⃣大数据开发笔记（四）：H

美团买菜实时数仓技术负责人严书，在 Flink Forward Asia 2022 实时湖仓专场的分享。

只要你会任意一门语言的stream流操作，就没道理不会大数据开发。 如果说零基础学大数据，感觉前面是一座山，那么只要你会java或者任意一门语言的stream流，那大数据就隔层纱。

在1.2亿条的实际生产数据集中进行测试，查询并发能力提升10～20倍！预聚合是OLAP系统中常用的一种优化手段，在通过在加载数据时就进行部分聚合计算...

已经更新100+篇~关注公众号,BAT大神带你飞~大数据成神之路目录大数据开发基础Java基础NIO并发JVM分布式ZookeeperRPCNettyJava基础NIO并发容器JVM分布式zookee