红豆奶茶少冰半糖

这是我参与「第四届青训营」笔记创作活动的第20天 1、 YARN 概述 1.1 初识调度系统 1.1.1 场景导入 首先考虑如下虚拟场景，如何进行调度在保障就餐公平性的前提...

这是我参与「第四届青训营」笔记创作活动的的第19天 一、分布式系统 1.1 分布式系统面临的挑战 数据规模越来越大 服务的可用性要求越来越高 快速迭代的业务要求系统足够易用...

这是我参与「第四届青训营」笔记创作活动的的第18天 1、 列存 Vs 行存 概述数据格式层的作用和定位，对比列式存储和行式存储的基本原理和使用场景 1.1 数据格式层概述 ...

这是我参与「第四届青训营」笔记创作活动的第17天 1、 消息队列概述 1.1 消息队列的应用场景 1.1.1 MQ 消息通道 1.1.2 EventBridge 事件总线 ...

这是我参与「第四届青训营」笔记创作活动的第15天 1、 发展历史 1.1 数据湖发展阶段 - Hadoop 1.2 数据湖发展阶段 - Hive 1.3 数据湖发展阶段 -...

这是我参与「第四届青训营」笔记创作活动的第14天 1、适用场景 1.1 认识HBase HBase是一个开源的NoSQL 分布式数据库，是Apache软件基金会顶级项目之一...

这是我参与「第四届青训营」笔记创作活动的第13天 1、 HDFS 元数据高可用 1.1 高可用的需求 1.1.1 服务高可用的需求 故障类型： 硬件故障 软件故障 人为故障...

这是我参与「第四届青训营」笔记创作活动的第11天 1、 HDFS基本介绍 HDFS: Hadoop Distributed File System 1.1Windows单机...

这是我参与「第四届青训营」笔记创作活动的第10天 1、 概述 1.1 大数据与OLAP的演变 信息交换：通信和网络宽带的大幅增长 信息存储：计算机存储量的大幅增长 信息处理...

这是我参与「第四届青训营」笔记创作活动的第8天笔记 1、 Shuffle概述 1.1 MapReduce 概述 Map阶段，是在单机上进行的针对一小块数据的计算过程 Shu...

这是我参与「第四届青训营」笔记创作活动的的第7天 1、 大数据处理引擎Spark介绍 1.1 大数据处理技术栈 1.2 常见大数据处理链路 1.3 常见的大数据处理引擎 1...

这是我参与「第四届青训营」笔记创作活动的第 6 天 1、 流计算概述 1.1 处理时间窗口 实时计算：处理时间窗口 数据实时流动、计算，窗口结束直接发送结果，不需要同期调度...

文章第一句话为“这是我参与「第四届青训营 」笔记创作活动的第4天 1、数据流和动态表 1.1 随处可见的数据流 1.2 传统 SQL 和流处理 1.3 数据流和动态表的转换...

这是我参与「第四届青训营 」笔记创作活动的第3天 1、 Flink 概述 1.1 Apache Flink 诞生背景 1.1.1 什么是大数据 指无法在一定时间内用常规软件...

这是我参与「第四届青训营 」笔记创作活动的的第1天 一、大数据体系和SQL 1、SQL的处理流程 1.1 Parser ●String -> AST (Abstruct S...