认识存储与数据库 | 青训营

179 阅读3分钟

经典案例

一条数据从产生,到数据流动,最后持久化的全生命周期

数据的产生

某天,小明同学下载了一个新的APP。因为第一次登录,所以进入APP后需要注册一个新的账号:

  • 用户名:小明
  • 密码:helloworld
  • 密码提示问题:coding
  • ……

于是小明同学三下五除二地填好了资料,按下了【注册】按钮

就这样,数据就从无到有地产生了,并且在数十/数百毫秒内向APP的后端服务器飞奔而去……

数据的流动

数据的持久化

潜在的问题

  1. 数据库怎么保证数据不丢?
  2. 数据库怎么处理多人同时修改的问题?
  3. 为什么用数据库,除了数据库还能存到别的存储系统吗?
  4. 数据库只能处理结构化数据吗?
  5. 有哪些操作数据库的方式,要用什么编程语言?

存储&数据库简介

什么是存储系统,什么是数据库系统?

存储系统

系统概览

存储系统:一个提供了读写、控制类接口,能够安全有效地把数据持久化的软件

系统特点

  • 作为后端软件的底座,性能敏感
  • 存储系统代码,既“简单”又“复杂
  • 存储系统软件架构,容易受硬件影响

存储器层级结构

数据怎么从应用到存储介质

  • 缓存是重要,贯穿整个存储体系
  • 拷贝很昂贵,应该尽量减少
  • 硬件设备五花八门,需要有抽象统一的接入层

RAID技术

单机存储系统怎么做到高性能/高性价比/高可靠性

R(edundant)A(rray) of I(nexpensive)D(isks)

RAID出现的背景:

  • 单块大容量磁盘的价格 > 多块小容量磁盘
  • 单块磁盘的写入性能 < 多块磁盘的并发写入性能
  • 单块磁盘的容错能力有限,不够安全

RAID 0

  • 多块磁盘简单组合
  • 数据条带化存储,提高磁盘带宽
  • 没有额外的容错设计

RAID 1

  • 一块磁盘对应一块额外镜像盘
  • 真实空间利用率仅50%
  • 容错能力强

RAID 0 + 1

  • 结合了RAID 0 和RAID 1
  • 真实空间利用率仅50%
  • 容错能力强,写入带宽好

数据库

难道数据库和存储系统不一样吗?

  • 关系型数据库
  • 非关系型数据库

概览

关系(Relation)又是什么?

  • Edgar.F.Codd于1970年提出关系模型

  • 关系 = 集合 = 任意元素组成的若干有序偶对

    反映了事物间的关系

  • 关系代数 = 对关系作运算的抽象查询语言(并、交、笛卡尔积……)

  • SQL = 一种DSL = 方便人类阅读的关系代数表达形式

关系型数据库特点

关系型数据库是存储系统,但是在存储之外,又发展出其他能力

  • 结构化数据友好
  • 支持事务(ACID)
  • 支持复杂查询语言

非关系型数据库特点

非关系型数据库也是存储系统,但是一般不要求严格的结构化

  • 半结构化数据友好
  • 可能支持事务(ACID)
  • 可能支持复杂查询语言

数据库VS经典存储

结构化数据管理

事务能力

凸显出数据库支持【事务】的优越性

事务具有:

  • A(tomicity):事务内的操作要么全做,要么不做
  • C(onsistency)事务执行前后,数据状态是一致的
  • I(solation):可以隔离多个并发事务,避免影响
  • D(urability):事务一旦提交成功,数据保证持久性

复杂查询能力

写入数据之后,想做很复杂的查询怎么办?

Example:请查询出名字以xiao开头,且密码提示问题小于10个字的人,并按性别分组统计人数

数据库使用方式

Everything is D(omain) S(pecific) L(anguage)→maybe SQL

以SQL为例,要操作数据时,支持一下操作:

  • Insert
  • Update
  • Select
  • Delete
  • Where子句
  • GroupBy
  • OrderBy

要对数据定义做修改时,支持以下操作:

  • Create user
  • Create database
  • Create table
  • Alter table
  • ……