不想说话

spark根据宽窄依赖划分stage,那么如何区分宽窄依赖呢？ 概念 很多资料上讲宽窄依赖：窄依赖指父RDD的每个分区只被子RDD的一个分区所使用，宽依赖指父RDD的每个分区都可能被子RDD的多个分区

问题发现 在测试集群新建了一个ReplicatedMergeTree,插入多条相同的数据，发现每个分片只有一条 clickhouse zk的目录结构说明 同个shard基于blockid的去重方法 普

线上HDFS写失败问题分析；写失败现象；HDFS源码分析；线上写失败的原因和分析过程；最后的解决方案；

写错误流程 ResponsorProcessor设置errorIndex以及restartingNodeIndex，hasError标记为true，关闭response线程

HDFS写流程介绍；HDFS写入流程图；HDFS block packet chunk关系；hdfs写入源码分析

介绍LSM存储引擎和其他存储引擎的对比，其应用场景。ClickHouse使用LSM存储引擎和列存。按照分区键分成不同的目录，达到阈值后压缩落盘生成block。