滴滴答滴

这是我参与【第四届青训营-大数据场】笔记创作活动的第15天 分布式共识机制 采用基于哈希图数据结构的HashNet共识机制、基于随机选择函数的拜占庭协商(BA-VRF)共识机制和基础DAG共识机制，提

这是我参与【第四届青训营-大数据场】笔记创作活动的第14天 LSMT 是Log-Structured Merge-Tree 的缩写，由 Patrick O 'Neil etc.在 1996 年的论文

这是我参与【第四届青训营-大数据场】笔记创作活动的第13天 计算层:各种计算引擎 存储层:承载数据的持久化存储 数据格式层:定义了存储层文件内部的组织格式， 计算引擎通过格式层的支持来读写文件 存储层

这是我参与【第四届青训营-大数据场】笔记创作活动的第12天 消息队列 事件源:将云服务、自定义应用、SaaS 应用等应用程序产生的事件消息发布到事件集。 事件集:存储接收到的事件消息，并根据事件规则将

这是我参与【第四届青训营-大数据场】笔记创作活动的第11天 HDFS-分布式存储系统: HDFS 通过将文件分块来存储大文件，HDFS 的组件有 NameNode 和 DataNode，分别负责提供元

这是我参与【第四届青训营-大数据场】笔记创作活动的第10天 HDFS 是一种开源的分布式文件系统，基于常见商用有硬件构建海量大规模存储集群，提供极低 的存储成本，极大的存储容量支持。 HDFS 提供高

这是我参与【第四届青训营-大数据场】笔记创作- - 文活动的第9天- 维护目录树 - 维护目录树的增删改查操作，保证所有修改都能持久化，以便机器掉电不会造成数据丢失或不一致。 - 维护文件和数据块的

这是我参与【第四届青训营-大数据场】笔记创作活动的第8天 Distinct计算状态复用 对于distinct的优化，一般批里面的引擎都是通过把它优化成aggregate的方式来处理，但是在流式wind

这是我参与【第四届青训营-大数据场】笔记创作活动的第7天 HOP Window （滑动窗口） 了解了上面的TUMBLE窗口的基本原理后，HOP窗口就容易理解了。上面的TUMBLE窗口是每条数据只会落在