因为目前我们线上的Flink版本是用的1.11。所以这个系列博客从Flink1.11的代码跟读起来 点开execute方法,看到如注释所示。这个函数作用为触发flink程序执行，在设置的StreamExecutionGraph的数据DAG图中，将默认使用输出流作为Sink。当执…

client 客户端提交任务给 JobManager JobManager 负责申请任务运行锁需要的资源并管理任务和资源 JobManager 分发任务给 TaskManager 执行 TaskMan

很幸运，Apache 社区就有这么一款工具：Zeppelin，而且可能是开源界最好的 Flink 开发平台。 下面是 Zeppelin 和 Flink 的故事。 Flink：我提供了 SQL、Java、Scala 还有 Python 等多种语言支持，不过每种语言都有自己的入口，…

平台建设的背景 传统离线数据开发时效性较差，无法满足快速迭代的互联网需求。伴随着以 Flink 为代表的实时技术的飞速发展，实时计算被越来越多的企业使用，但是在使用中，各种问题也随之而来。比如开发者使

1. 三种模式的分析 Flink 作业目前有三种创建方式：JAR 模式、画布模式和 SQL 模式。不同的提交作业的方式针对的人群也是不一样的。 Jar 模式基于 DataStream/DataSet API 开发，主要针对的是底层的开发人员。 · 性能优化方便，可以非常有针对性…

数据仓库是一个集成的（Integrated），面向主题的（Subject-Oriented），随时间变化的（Time-Variant），不可修改的（Nonvolatile）数据集合，用于支持管理决策。这是数据仓库之父 Bill Inmon 在 1990 年提出的数据仓库概念。该…