今天是第8篇打卡学习,学习一下主流数据库剖析,以下是知识点总结:
3.1单机存储
3.2分布式存储
3.3单机关系型数据库
3.4单机非关系型数据库
3.5分布式数据库
3.1单机存储
单机存储:单个计算机节点上的存储软件系统,一般不涉及网络交互
经典的单机存储系统:1)本地文件系统 2)K-V存储
1)单机存储-本地文件系统
典型产品:Linux
文件系统的管理单元:文件
文件系统接口:文件系统繁多,如Ext2/3/4,sysfs,rootfs等,但都遵循VFS的统一抽象接口
Linux文件系统的两大数据结构:Index Node & Directory Entry
2)K-V存储
典型产品:RocksDB
常见使用方式:put(k,)&get(K)
常见数据结构:LSM-Tre,某种程度上牺牲读性能,追求写入性能
3.2分布式存储系统
在单机存储基础上实现了分布式协议,涉及大量网络交互。
典型产品:1)分布式文件系统 2)分布式对象存储
1)分布式文件系统
HDFS:Hadoop Distributed File System
HDFS核心特点:支持海量数据存储;高容错性;弱POSIX语义;使用普通x86服务器,性价比高
2)分布式对象存储
ceph
Ceph的核心特点:
一套系统支持对象接口、块接口、文件接口,但是一切皆对象;数据写入采用主备复制模型;数据分布模型采用CRUSH算法
3.3单机数据库
单机数据库:单个计算机节点上的数据库系统
事务在单机内执行,也可能通过网络交互实现分布式事务
1)关系型数据库
Oracle、Mysql、PostgreSQL
2)非关系型数据库
MongoDB、Redis、Elasticsearch
关系型数据库一般直接使用SQL交互,而非关系型数据库交互方式各不相同。
非关系型数据库的数据结构千奇百怪,没有关系约束后,schema相对灵活。
不管是否关系型数据库,大家都在尝试支持SQL(子集)和“事务
那么,单机数据库遇到了哪些问题&挑战,需要我们引入分布式架构来解决?
答:容量、弹性、性价比