ClickHouse存储| 青训营笔记

52 阅读2分钟

这是我参与「第五届青训营 」笔记创作活动的第13天。

ClickHouse

数据库

定义

数据库是结构化信息或数据的数据集合,以电子形式存储在计算机系统中,通常由DBMS管理。通常把DBMS、数据以及关联应用称为数据库系统,简称数据库。

数据库类型

数据库有很多种,至于各种数据库孰优孰劣,主要取决于企业希望如何使用数据。 从存储上:

  • 关系型数据库:关系型数据库是把数据以表的形式进行储存,然后再各个表之间建立关系,通过这些表之间的关系来操作不同表之间的数据。
  • 非关系型数据库:NoSQL 或非关系数据库,支持存储和操作非结构化及半结构化数据。相比于关系型数据库,NoSQL没有固定的表结构,且数据之间不存在表与表之间的关系,数据之间可以是独立的。NoSQL的关键是它们放弃了传统关系型数据库的强事务保证和关系模型,通过所谓最终一致性和非关系数据模型(例如键值对,图,文档)来提高Web应用所注重的高可用性和可扩展性。

从架构上:

  • 单机数据库:在一台计算机上完成数据的存储和查询的数据库系统。
  • 分布式数据库:分布式数据库由位于不同站点的两个或多个文件组成。数据库可以存储在多台计算机上,位于同一个物理位置,或分散在不同的网络上。

功能上:

  • OLTP 数据库:OLTP(Online transactional processing)数据库是一种高速分析数据库,专为多个用户执行大量事务而设计。
  • OLAP 数据库:OLAP (Online analytical processing) 数据库旨在同时分析多个数据维度,帮助团队更好地理解其数据中的复杂关系

数据架构

image.png

列式存储

优点

  • 数据压缩
  • 有利于数据选择
  • 延迟物化(物化:将数据转化为可以被计算或输出的数据格式)

ClickHouse应用场景

  • 大宽表的存储和查询
  • 离线数据分析
  • 复杂类型查询

小结

本次课程学习了列式存储ClickHouse,是一种LSM-TREE架构,使用稀疏索引加速查询的数据库。