夜阑_

这是我参与「第四届青训营 」笔记创作活动的第 16 天! 关于 LSMT&存储引擎 LSMT LSMT 是 Log-Structured Merge-Tree 的缩写，由 Patrick O ‘Nei

这是我参与「第四届青训营 」笔记创作活动的第 15 天! Parquet 原理详解 1、Parquet 简介 http://parquet.apache.org 大数据分析领域使用最广的列存格式 Sp

这是我参与「第四届青训营 」笔记创作活动的第 14 天! Pulsar 详解 1、Pulsar 架构 （1）Pulsar Proxy Pulsar 客户端连接集群的两种方式 Pulsar Client

这是我参与「第四届青训营 」笔记创作活动的第 13 天! 设计一个简单的数据湖 1、文件结构 存入数据，按照 date 分区，schema： 每天都会写入新数据 需要使用列存格式 写入数据时 按照每条

这是我参与「第四届青训营 」笔记创作活动的第 12 天! HBase 架构设计 架构设计 主要组件包括： HMaster：元数据管理、集群调度、保活 RegionServer：提供数据读写服务、每个实

这是我参与「第四届青训营 」笔记创作活动的第 11 天! 元数据高可用 （1）高可用的需求 1.服务高可用的需求 故障类型 硬件故障 软件故障 人为故障 灾难：数据中心级别不可用 机房断电 机房空调停

这是我参与「第四届青训营 」笔记创作活动的第 10天! 1、HDFS 架构原理 （1）关于 FDFS HDFS（Hadoop Distributed File System）即分布式文件系统 Hado

这是我参与「第四届青训营 」笔记创作活动的第 9 天! 概述 Presto 设计思想： Presto 最初是由 Facebook 研发的构建于 Hadoop/HDFS 系统之上的 PB 级交互式分析引

这是我参与「第四届青训营 」笔记创作活动的第 8 天! 1、Shuffle 简述： （1）关于 MapReduce 2004 年谷歌发布了《MapReduce：Simplified Data Proc