这是我参与「第五届青训营 」笔记创作活动的第9天
重点内容
- 微服务架构介绍
- 微服务架构原理及特征
- 核心服务治理功能
- 字节跳动服务治理实践
知识点介绍
微服务架构介绍
为什么系统架构需要演进
- 互联网的爆炸性发展
- 硬件设施的快速发展
- 需求复杂性的多样化
- 开发人员的急剧增加
- 计算机理论及技术的发展
演变历史
-
单体架构
-
优点
- 性能最高
- 冗余小
-
缺点
- debug困难
- 模块相互影响
- 模块分工、开分流程
-
-
垂直应用架构
-
优点
- 业务独立开发维护
-
缺点
- 不同业务存在冗余
- 每个业务还是单体
-
-
分布式架构
-
优点
- 业务无关的独立服务
-
劣势
- 服务模块bug可导致全站瘫痪
- 调用关系复杂
- 不同服务冗余
-
-
SOA架构
-
优点
- 服务注册
-
缺点
- 整个系统设计是中心化的
- 需要从上至下设计
- 重构困难
-
-
微服务架构
-
优点
- 开发效率
- 业务独立设计
- 自下而上
- 故障隔离
-
缺点
- 治理、运维难度
- 观测挑战
- 安全性
- 分布式系统
-
微服务架构核心要素
-
服务治理
- 服务注册
- 服务发现
- 负载均衡
- 扩缩容
- 流量治理
- 稳定性治理
-
可观测性
- 日志采集
- 日志分析
- 监控打点
- 监控大盘
- 异常报警
- 链路追踪
-
安全
- 身份验证
- 认证授权
- 访问令牌
- 审计
- 传输加密
- 黑产攻击
微服务架构原理及特征
基本概念
- 服务(service)一组具有相同逻辑的运行实体
- 实例(instance)一个服务中,每个运行实体即为一个实例
- 实力与进程的关系:实力与进程之间没有必然对应关系,可以一个实例可以对应一个或多个进程
- 集群(cluster)通常指服务内部的逻辑划分,包含多个实例
- 常见的实例承载形式:进程、VM、k8s pod
- 有状态/无状态服务:服务的实例是否存储了可持久化的数据
流量特征
- 统一网关入口
- 内网通信多数采用rpc
- 网状调用链路
核心服务治理功能
服务发布
服务发布,即指让一个服务升级运行新的代码的过程
服务发布的难点
- 服务不可用
- 服务抖动
- 服务回滚
解决方案
- 蓝绿部署:简单、稳定,但需要两倍资源
- 灰度发布(金丝雀发布):一个一个实例发布,需要精细流量控制,流量回滚复杂
流量治理
在微服务架构下,我们可以基于地区、集群、实例、请求等维度,对端到端流量的路由路径进行治理
稳定性治理
线上服务总是会出现问题,这与程序的正确性无关
- 网络攻击
- 流量突增
- 机房断电
- 光纤被挖
- 机器故障
- 网络故障
- 机房空调故障
稳定性治理功能
- 限流
- 熔断
- 过载保护
- 降级
字节跳动服务治理实践
重试的意义
一般本地函数没有重试的必要
fucn LocalFunc(x int) int {
res := calculate
}
远程调用
func RemoteFunc(ctx context.Context, x int) (int, error) {
ctx2, defer_func := context.WithTimeout(ctx, time.Second)
defer defer_func()
res, err := grpc_client.Calculate(ctx2, x * 2)
return res, err
}
重试的意义
降低错误率
假设每次请求的错误率为0.01,那么连续两次错误概率则为0.0001
降低长尾延时
对于偶尔耗时较长的请求,重试请求有机会提前返回
容忍暂时性错误
某些时候系统会有暂时性异常(例如网络抖动),重试可以尽量规避
避开下游故障实例
一个服务中可能会有少量实例故障(例如机器故障),重试其他实例可以成功
重试的难点
- 幂等性
- 重试风暴
- 超时设置
重试策略
限制重试比例
设定一个重试比例阈值(例如%1),重试次数占所有请求比例不超过该阈值
防止链路重试
链路层面的放重试风暴的核心是限制每层都发生重试,理想状态下只有最下层发生重试,可以返回特殊的状态码
Hedged request
对于可能超时(或延迟高)的请求,重新向另一个下游实例发送一个相同的请求,并等待先到达的响应
课后
-
结合 CAP 等原理,思考微服务架构有哪些缺陷?
数据一致性需要单独维护;微服务中一个请求可能会需要调用多个服务,某些服务的故障可能导致整个链路故障。
-
微服务是否拆分得越“微”越好?为什么?
不是。拆分服务会提高网络延迟,导致进程之间通信的可用性降低,服务之间维护数据一致性复杂,一些类所需的数据不适合拆分。
-
Service Mesh 这一架构是为了解决微服务架构的什么问题?
Service Mesh的目标是要将微服务治理体系下沉为与业务无关的基础设施
-
有没有可能有这样一种架构,从开发上线运维体验上是微服务,但实际运行又类似单体服务?
我认为和CAP模型一样,微服务和单体的优缺点同样相互冲突,单体服务的运行效率高但对硬件、部署的压力较大,且需要理解大量代码;而微服务开发时只需要注重自己的模块,可以利用负载均衡分配流量降低硬件压力,链路追踪等技术进行运维。两者的优缺点互补,无法相互融合。