高质量编程简介及代码规范
1.1 简介
高质量:编写的代码能够达到正确可靠、简洁清晰的目标课称之为高质量代码
正确性:边界条件是否考虑完备;
可靠:异常情况处理,稳定性保证;
简洁清晰:代码给别人看,易读易维护,逻辑简单
编程原则
简单性
用简单清晰的逻辑编写代码
不理解的代码无法修复改进
可读性
代码给人看,人要看得懂
编写可维护代码的第一步是确保代码可读
生产力
团队整体工作效率
1.2 编码规范
1.2.1 代码格式
推荐使用gofmt自动格式化代码
gofmt:go语言官方提供的工具,能自动格式化go语言代码为官方统一风格,常见ide都支持方便的配置
goimports:也是go语言官方提供的工具,实际等于gofmt加上依赖包管理,自动增删依赖的包引用、将依赖包按钮字母序排序并分类。
1.2.2 注释
注释应该做的:
- 解释代码作用
- 解释代码如何做的
- 解释代码实现的原因
提供上下文 - 代码什么情况会出错
代码的限制条件
公共符号始终要注释
包中声明的每个公共的符号:变量、常量、函数以及结构都需要添加注释
描述函数的功能、用途 任何既不明显也不简短的公共功能必须注释
无论长度或复杂程度如何,对库中的任何函数都必须注释
注释和代码逻辑可能不一样:一开始是符合的,后来修改的时候改了代码,没改注释
1.2.3 命名规范
变量名
- 简洁胜于冗长
- 缩略词全大写,但当其位于变量开头且不需要导出时,使用全小写。
- 变量距离其被使用的地方越远,需要带更多的上下文信息。
如全局变量在名字中要更多的上下文信息,使得在不同的地方可以轻易辨认出其含义。
函数名
- 函数名不携带包名的上下文信息,因为包名和函数名总是成对出现的
- 函数名尽量简短
- 当名为foo的包某个函数返回类型Foo时,可以省略类型信息而不导致歧义
- 当名为foo的包某个函数返回类型T时(T不是Foo),可以在函数名中加入类型信息
包名
- 只由小写字母组成,不包含大写字母和下划线等字符
- 简短并包含一定的上下文信息,如schema、task等
- 不要与标准库同名。如sync或strings 以下规则尽量满足,以标准库包名为例:
- 不使用常用变量名作为包名。如使用bufio而不是buf
- 使用单数而不是复数。如encoding而不是encodings
- 谨慎地使用缩写。如使用fmt在并不破坏上下文的情况下比format更加简短的。
小结
核心目标是降低阅读理解代码的成本
重点考虑上下文信息,设计简洁清晰的名称
1.2.4 控制流程
避免嵌套,保持正常流程清晰
如if else
若两个分支中都包含return,可以去除冗余的else
尽量保持正常代码路径为最小缩进
优先处理错误情况/特殊情况,尽早返回或继续循环来减少嵌套 对比如下代码:
//bad
func OneFunc() error{
err := doSomething()
if err == nil{
err := doAnotherThing()
if err == nil{
return nil // normal case
}
return err
}
return err
}
//good
fun OneFunc() error{
if err := doSomeThing(); err != nil{
return err
}
if err := doAnotherThing(); err != nil{
return err
}
return nil // normal case
}
小结
- 线性原理,处理逻辑尽量走直线,避免复杂的嵌套分支
- 正常流程代码沿着屏幕向下移动
- 提升代码可维护性和可读性
- 故障问题大多出现在复杂的条件语句和循环语句中
1.2.5 错误和异常处理
简单错误
- 简单的错误指的是仅出现一次的错误,且在其他地方不需要捕获该错误
- 优先使用errors.New来创建匿名变量来直接表示简单错误
func defaultCheckRedirect(req *Request, via []*Request) error{
if len(via) >= 10{
return errors.New("stopped after 10 redirects")
}
return nil
}
- 若有格式化的需求,使用fmt.Errorf
复杂的错误:错误的Wrap和Unwrap
- 错误的Wrap实际上是提供了一个error嵌套另一个error的能力,从而生成了error的跟踪链
- 在fmt.Errorf中使用 %w 关键字来将一个错误关联至错误链中
结合实际的错误的判定方法,确定错误链中是否有我们关注的错误出现
每一层的调用方都可以补充错误的上下文信息,方便跟踪排查问题
list, _, err := c.GetBytes(cache.Subkey(a.actionID, "srcfiles"))
if err != nil{
return fmt.Errorf("reading srcfiles list: %w", err)
}
错误判定
error.Is
判定一个错误是否为特定错误,使用errors.Is
不同于使用==,使用该方法可以判定错误链上的所有错误是否含有特定的错误
错误链上可能有很多种错误
error.As
在错误链上获取特定种类的错误
panic
比错误更严重,它出现表示程序没办法正常工作
- 不建议在业务代码中使用 panic
- 调用函数不包含recover会造成程序崩溃
- 若问题可以被屏蔽或解决,建议使用error代替panic
- 当程序启动阶段发生不可逆转的错误时,可以在init或main函数中使用panic,让问题早点暴露出来。
recover
有panic,就有对应的recover机制来处理
引用其他的库有bug或panic影响到自身逻辑,就使用recover机制
- recover只能在被defer的函数中使用
- 嵌套无法生效
- 只在当前goroutine生效
- defer的语句是后进先出
- 若需要更多的上下文信息,可以recover后再log中记录当前的调用栈
defer func(){
if e:=recover(); e != nil{
f = nil
err = fmt.Errorf("gitfs panic: %v\n%s", e, debug.Stack())
}
}()
}
1.3 性能优化建议
- 性能优化的前提是满足正确可靠、间接清晰等质量因素
- 性能优化是综合评估,有时候时间效率和空间效率可能对立
1.3.1 benchmark
go test -bench=. -benchmem
我的运行结果:
第二个数:一共执行次数,即b.N的值
第三个数:每次执行花费时间
1.3.2 slice
预分配内存
尽可能在使用make()初始化切片时提供容量信息,指定slice的大小,时间会更短,消耗容量也更小。
- 切片本质是一个数组片段的描述,包括数组指针、片段的长度、片段的容量(不改变内存分配情况下的最大长度)
- 切片操作并不复制切片指向的元素
- 创建一个新的切片会复用原来切片的底层数组
大内存未释放
在已有切片的基础上创建切片,不会创建新的底层数组
若原切片较大,代码在原切片基础上新建小切片,则原底层数组在内存中有引用,得不到释放。
可使用copy替代rre-slice
//在原数组基础上创建切片
func GetLastBySlice(origin []int)[]int{
return origin[len(origin)-2:]
}
//创建新的切片,把数据复制过去
func GetLastByCopy(origin []int) []int{
result := make([]int,2)
copy(result,origin[len(origin)-2:])
return result
}
若数组origin很大,则第一个函数的内存占了很大,而第二个函数内存很小。
1.3.3 map
预分配内存
make(map [int]int) vs make(map[int]int,size)
预分配了性能会更好
- 不断向map中添加元素的操作会触发map的扩容
- 提前分配好空间可以减少内存拷贝何rehash的消耗
- 建议根据实际需求提前预估好需要的空间
1.3.4 字符串处理
使用strings.Builder拼接字符串
s += strbuilder.WriteString(str)buf.WriteString(str)1时间性能最差,2、3时间差不多,但2 的更短一些
分析:- 字符串在go语言中是不可变类型,占用内存大小是固定的
- 使用+每次都会重新分配内存
- 2和3底层都是[]byte数组,它的内存扩容策略,不需要每次拼接重新分配内存
使用buffer:重新申请空间,创建字符串
使用builder:将底层数组转成字符串返回,性能更好
strings.builder也可以预分配内存
builder.Grow(len(str)) 性能更好
1.3.5 空结构体
使用空结构体节省内存
空结构体struct{}实例不占据任何内存空间,可作为各种场景下的占位符使用。
节省资源,而且空结构体本身具备很强的语义,不需要任何值,仅作为占位符。
使用场景
实现Set,可以考虑用map代替。
只需要用到map的键,不需要值。
就可以make(map[int]struct{})
1.3.6 atomic包
多线程编程的场景,可以用到atomic包的原子变量或者加锁
但是atomic包的时间性能更好
使用方法
- 锁的实现是通过操作系统实现,属于系统调用,调用成本高
- atomic操作是通过硬件实现,效率比锁高。
- sync.Mutex应该用来保护一段逻辑,不仅仅用于保护一个变量。若是只要保护一个变量的时候,可以考虑atomic包
- 对应非数值操作,可以使用atomic.Value,能承载一个interface{}
小结
- 避免常见的性能陷阱可以保证大部分程序的性能
- 普通应用代码,不要一味地追求程序的性能。
- 越高级的性能优化手段越容易出现问题
- 在满足正确可靠、简洁清晰的质量要求的前提下提高程序性能
2. 性能调优实战
2.1 性能调优原则
- 要依靠数据而不是猜测 实际的运行环境和逻辑可能不一样
- 要定位到最大瓶颈,而不是细枝末节,对性能影响不大的那些部分
- 不要过早优化 在迭代过程中,逻辑会变化,用户数量变化,等到快出现性能问题的时候再分析
- 不要过度优化
若选定了特定的优化手段,再升级的时候可能难以兼容
2.2 说明
pprof工具可以直到应用再什么地方耗费了多少CPU、memory pprof是用于可视化和分析性能分析数据的工具
2.2.1 功能简介
四大块:
- 提供相关工具
- 采样不同类型的数据
- 网页端、可视化终端的profile的分析
- 支持多种展示类型,根据需要选择类型图
2.3 性能调优案例
2.3.2 业务服务优化
基本概念
示例图:
网端 服务端 调用其他service(依赖)调用链
基础库:监控打点,日志记录
流程
1. 建立服务性能评估手段
对整体分析,单独benchmark不合适,要从更高层面分析
请求流量构造:
不同参数的逻辑不同,对性能的影响不同
要能覆盖线上真实流量
压测范围:
先单机器压测
再集群压测
有压测报告:
接口耗时;平均QPS
性能数据采集:
单机性能数据
集群性能数据
2. 分析性能数据,定位性能瓶颈
pprof工具看哪些部分耗资源,分析瓶颈
使用库不规范
高并发场景优化不足
3. 重点优化项改造(最耗资源的那部分)
正确性是基础:
修改前后的请求和响应 差别应该不大
响应数据diff:
线上请求数据录制回放;
新旧逻辑接口数据diff
4. 优化效果验证
重复压测验证
上限评估优化效果:
关注服务监控;
逐步放量;
收集性能数据;
5. 进一步优化,服务整体链路分析
规范上游服务调用接口,明确场景需求;
分析链路,通过业务流程优化提升服务性能;
若A重复调用B,考虑能否合并;
2.3.2 基础库优化
2.3.3 go语言优化
编译器、运行时优化
优化内存分配策略、优化代码编译流程,生成更高效的程序
内部压测验证
推广业务服务落地验证
优点:
接入简单,只需要调整编译配置
通用性强