RPC的分层设计 | 青训营笔记

37 阅读2分钟

这是我参与「第五届青训营 」笔记创作活动的第12天

分层设计

以ApacheThrift为例

image.png

编解码层

IDL

客户端和服务端依赖同一份IDL文件,以生成不同语言的CodeGen

IDL文件描述了一些接口信息

image.png

数据格式

  • 语言特定的格式:许多编程语言都内建了将内存对象编码为字节序列的支持,利于Java的序列化java.io.Serializable
  • 文本格式:JSON,XML,CSV等文本格式,具有人类可读性
  • 二进制编码:具备跨语言和高性能等优点,常见有Thrift的BinaryProtocol,Protobuf等.

选型

  • 兼容性:支持自动增加新的字段,而不影响老的服务,提升系统的灵活度。
  • 通用性:支持跨平台跨语言
  • 性能:从空间和时间两个维度考虑,也就是编码后数据大小和编码耗费时长

协议层

概念

  • 特殊结束符 一个特殊的字符作为每个协议单元结束的标识

image.png

  • 变长协议:以定长加不定长的组成部分,其中定长的部分需要描述不定长的内容长度

image.png

协议构造

多路复用:同一个连接内可以有多个请求流 image.png

协议解析

image.png

网络通信层

Sockets API

位于应用层和传输层之间

image.png Socket编程需要知道双方的IP和端口 bind操作把套接字绑定到地址上 服务器端listen时处于阻塞状态,等待客户端的连接 等到一个连接后进行accept,然后读取消息。 image.png

网络库

  • 提供简单易用的api
    • 封装底层Socket API
    • 连接管理和事件分发
  • 功能
    • 协议支持:tcp,udp和uds等
    • 优雅退出,异常处理等
  • 性能
    • 应用层buffer减少copy
    • 高性能定时器,对象池等