ClickHouse 列存储 | 青训营笔记

58 阅读2分钟

这是我参与「第五届青训营 」伴学笔记创作活动的第 8 天

一、本堂课的知识要点有哪些?

  1. 数据库、DBMS、OLTP 数据库 、OLAP 数据库;
  2. 行式存储、列式存储、数据压缩、延迟物化、向量化;
  3. ClickHouse 存储设计:Shard key、索引(哈希索引、B-Tree、B+Tree、LSM-Tree
  4. ClickHouse 典型应用场景。

二、本堂课介绍了哪些知识点?

  1. 数据库:结构化信息或数据的有序集合,一般以电子形式存储在计算机系统中。通常由数据库管理系统 (DBMS) 来控制。在现实中,数据、DBMS 及关联应用一起被称为数据库系统,通常简称为数据库。

  2. 数据库类型:

    1. 关系数据库:关系型数据库是把数据以表的形式进行储存,然后再各个表之间建立关系,通过这些表之间的关系来操作不同表之间的数据。
    2. 非关系数据库:NoSQL 或非关系数据库,支持存储和操作非结构化及半结构化数据。相比于关系型数据库,NoSQL 没有固定的表结构,且数据之间不存在表与表之间的关系,数据之间可以是独立的。NoSQL 的关键是它们放弃了传统关系型数据库的强事务保证和关系模型,通过所谓最终一致性和非关系数据模型(例如键值对,图,文档)来提高 Web 应用所注重的高可用性和可扩展性。
    3. 单机数据库:在一台计算机上完成数据的存储和查询的数据库系统。
    4. 分布式数据库:分布式数据库由位于不同站点的两个或多个文件组成。数据库可以存储在多台计算机上,位于同一个物理位置,或分散在不同的网络上。
    5. OLTP 数据库 :OLTP(Online transactional processing)数据库是一种高速分析数据库,专为多个用户执行大量事务而设计。
    6. OLAP 数据库:OLAP (Online analytical processing) 数据库旨在同时分析多个数据维度,帮助团队更好地理解其数据中的复杂关系
  3. 行式存储与列式存储对比:

  4. ClickHouse 的架构图:

三、个人总结:

这节课介绍了不止是列存储相关的数据库,还介绍了 SQL 执行过程等等,这些都是后端程序员需要学习的内容,列存储的话暂时感觉不怎么用的上,所以也就简单记点笔记了。等后面用上的时候在深入学习一下。

四、我参考了哪些外部资料?

【后端专场 学习资料七】第五届字节跳动青训营 - 掘金

「ClickHouse - 你没有见过的列存储」第五届字节跳动青训营 - 后端专场