青训营学习笔记

这是我参与「第四届青训营 」笔记创作活动的的第17天 一、Kubernetes 简介 几个核心概念 Pod PVC/PV/StorageClass Deployment Statefulset Nod

这是我参与「第四届青训营 -大数据场」笔记创作活动的第15天 一、分布式系统 1. 分布式系统面临的挑战 数据规模越来越大 服务的可用性要求越来越高 快速迭代的业务要求系统足够易用 2. 理想中的分布

这是我参与「第四届青训营 」笔记创作活动的的第14天 LSMT是什么 通过Append-only Write + 择机Compact来维护索引树的结构 为什么要采用LSMT模型 相对于B+树的优势 顺

这是我参与「第四届青训营」笔记创作活动的第 14 天。 今日学习内容： 1.列式存储和行式存储 2.Parquet 原理详解 3.ORC 原理详解及与Parquet 的对比 4.列存演进 01 列式存

这是我参与「第四届青训营」笔记创作活动的第12天 本节课程目录： 消息队列概述 Kafka 详解 Pulsar 详解 周边和生态 1. 消息队列概述 1.1 消息队列的应用场景 1.1.1 MQ 消息

这是我参与「第四届青训营 」笔记创作活动的的第11天 01 发展历史 1.1 Hadoop 数据湖最开始的概念——分布式存储HDFS 使用目录来区分不同的数据集 /douyin /20220623 /

这是我参与「第四届青训营」笔记创作活动的第10天 介绍HBase的设计理念、数据模型、适用场景、业界典型用例 介绍HBase的整体架构设计、主要模块设计 介绍Hbase针对海量数据场景所做的设计优化，

这是我参与「第四届青训营」笔记创作活动的第9天 今天的学习内容为 HDFS高可用性机制 01 元数据高可用 1.1 高可用的需求 故障类型：硬件故障、软件故障、人为操作不当、机房断电、机房空调停机、机

这是我参与「第四届青训营 」笔记创作活动的的第2天 第二节 流/批/OLAP 一体的 Flink 引擎介绍（1） 初识Flink

这是我参与「第四届青训营 」笔记创作活动的的第八天 今天的学习内容为《HDFS原理与应用》，内容包括 HDFS基本介绍、HDFS架构原理、HDFS关键设计、HDFS应用场景。 第一部分介绍了HDFS的

这是我参与「第四届青训营 」笔记创作活动的第七天 07 Presto 架构原理与优化介绍 在本节课中学习了Presto框架， Presto是大数据领域常见的交互式处理引擎，具有多数据源联邦查询、多租户

这是我参与「第四届青训营 」笔记创作活动的第六天 06 大数据 shuffle 原理与实践 今天学习的内容是Shuffle，首先通过MR框架引出Shuffle的概念，然后介绍了shuffle的算子，s

这是我参与「第四届青训营 」笔记创作活动的第五天 05 Spark 原理与实践 今天的学习内容为Spark的原理与实践 本节课第一部分介绍了Spark基本概念，Spark是一个支持各种各样的一个分布式

这是我参与「第四届青训营 」笔记创作活动的第4天 04 流计算中的 Window 计算 了解实时计算和批式计算的本质区别，以及实时计算所带来的新的机遇和挑战 了解实时计算中的核心功能:Watermar

这是我参与「第四届青训营 」笔记创作活动的第3天 03 Exactly Once 语义在 Flink 中的实现

这是我参与「第四届青训营 」笔记创作活动的的第1天，本文主要涵盖了课程一些重点知识，并对进行简单的个人总结。