用户7353691004881

本笔记记录了什么是shuffle,shuffle的基本流程。为什么shuffle对性能影响非常重要等内容...

本笔记记录了Spark处理引擎介绍，SparkCore的讲解，还有Sparksql原理的解析，并且了解完这个后可以思考一下Spark面临的挑战有哪些...

本次笔记记录了，流式计算基本概念，以及和批式计算的区别。watermark的含义、如何生成、如何传递，以及如何处理部分partition断流的问题等...

Flink 引擎是如何做到流/批/OLAP 一体的，又是通过什么东西来实现这个功能的，通过这个笔记你或许能有一些理解...

Flink是通过Checkpoint来实现Exactly-once领域的 我们的计算是有状态的，为了保证数据的不丢不重，我们要对设置一个数据恢复的时间点。。。。。。...