在大数据实时处理领域，Apache Flink和Apache Spark Streaming是两大主流框架。它们都能处理实时数据流，但设计理念和适用场景却大不相同。本文将深入浅出地分析两者的核心差异，

### 📌 一、背景：为什么自建路况平台？ 虽然我们集成了高德等地图 SDK，但它们存在以下问题： * ❌ 不掌握算法细节，无法精细调优 * ❌ ETA 偏差大：地图预估 vs 实际轨迹 * ❌

本文整理自中原银行数据平台中心开发工程师陈玉强在 Flink Forward Asia 2021 行业实践专场的演讲。

本文整理自货拉拉高级大数据开发工程师，Apache Amoro PMC 陈政羽老师，在Flink Forward Asia 2024 数据集成（一）专场的分享。

Flink On Yarn 架构 主要启动流程 1. 启动进程 首先我们通过下面的命令行启动flink on yarn的集群 bin/yarn-session.sh -n 3 -jm 1024 -nm

Flink 支持 Standalone 独立部署和 YARN、Kubernetes、Mesos 等集群部署模式，其中 YARN 集群部署模式在国内的应用越来越广泛。Flink 社区将推出 Flink on YARN 应用解读系列文章，分为上、下两篇。本文基于 FLIP-6 重构…

Flink 支持 Standalone 独立部署和 YARN、Kubernetes、Mesos 等集群部署模式，其中 YARN 集群部署模式在国内的应用越来越广泛。Flink 社区将推出 Flink on YARN 应用解读系列文章，分为上、下两篇。上篇分享了基于 FLIP-6…

今天为大家带来 秒懂 Flink 系列的第 25 篇原创文章 Flink On Yarn per-job 模式的提交流程及源码分析。

上一篇我们分析了Flink部署集群的过程和作业提交的方式，本篇我们来分析下，具体作业是如何被调度和计算的。具体分为2个部分来介绍 * 作业运行的整体框架，对相关的重要角色有深入了解 * 计算流程，重点