小阿磊

这是我参与「第四届青训营 」笔记创作活动的第10天。 上节课，我们了解了HDFS的架构和读写流程 HDFS通过将文件分块来存储大文件，HDFS的组件有NameNode和DataNode,分别负责提供元

这是我参与「第四届青训营 」笔记创作活动的第9天。 前提了解： flink，Spark 计算引擎 presto 查询引擎 本课程将以Apache HDFS为蓝本，重点介绍HDFS的原理和应用场景，帮助

这是我参与「第四届青训营 」笔记创作活动的第8天。 本节课程主要分为四个方面： 介绍大数据与 OLAP 的演进之路，并简单介绍 Presto 的设计理念 介绍 Presto 的基础概念与原理，加深对P

这是我参与「第四届青训营 」笔记创作活动的第7天。 本课程主要分为四个部分： shuffle概述：shuffle是什么，shuffle的基本过程是什么 spark中的shuffle算子：学习使用spa

这是我参与「第四届青训营 」笔记创作活动的第6天。 本课程主要有以下几个目标： 了解大数据处理常见的场景链路 了解Spark技术栈，包括SparkCore中的RDD/调度/Shuffle/内存管理等概

流式计算中的 Window 计算 这是我参与「第四届青训营 」笔记创作活动的第5天。 上节回顾： 流式计算的动态表 Flink中的State和Checkpoint的基本原理 Flink的Retract

这是我参与「第四届青训营 」笔记创作活动的第4天。 本节课程主要分为 4 个方面： 1.数据流和动态表 如何在数据流上执行SQL语句，说明流式处理中状态的概念 2.Exactly-Once 和Chec

这是我参与「第四届青训营 」笔记创作活动的的第3天。 本节课程主要分为 4 个方面： Flink的诞生背景 Flink概述：为什么会有流式计算的需求，为什么flink会脱颖而出 Flink整体架构：f

这是我参与「第四届青训营 」笔记创作活动的的第2天。 本节课程主要分为 4 个方面： 1.大数据体系和 SQL； 2.常见的查询优化器； 3.查询优化器的社区开源实践； 4.SQL 相关的前沿趋势。