前言
本文简单介绍了Go框架三件套(GORM、Kitex和Hertz)概念,带领大家进行简单了解,后续会补充实战情况。
0.基础概念讲解
- DB:数据库,即Database,是将大量数据储存起来,通过计算机加工可进行高效访问地数据集合。
- SQL:是一种数据库查询和程序设计语言,用于存取数据以及查询、更新和管理关系数据库系统。
- DSN:数据源名称,即Data Source Name,指当我们的数据库建立好之后,系统需要知道数据的来源,所以就需要设定系统的 DSN(数据来源名称)。
- ORM:对象关系映射,即Object-Relationl Mapping,是在关系型数据库和对象之间作一个映射。
- GORM:是Golang语言中一款性能极好的ORM库,数据表对应结构体,数据行对应结构体实例,数据库字段对应结构体字段。
- IDL:接口描述语言,即Interface description language,是跨平台开发的基础。
- PRC:远程过程调用,即Remote Procedure Call。它是利用网络从远程计算机上请求服务,可以理解为把程序的一部分放在其他远程计算机上执行。
- Kitex:字节内部的Golang微服务PRC框架,具有高性能、强可扩展性的特点。
- HTTP:超文本传输协议,即Hyper Text Transfer Protocol,是互联网上应用最为广泛的—种网络协议。
- Hertz:字节内部的HTTP框架,具有高易用性、高性能、高扩展性的特点。
1.GORM
1.GORM特性
- 全功能 ORM
- 关联 (Has One,Has Many,Belongs To,Many To Many,多态,单表继承)
- Create,Save,Update,Delete,Find 中钩子方法
- 支持
Preload、Joins的预加载 - 事务,嵌套事务,Save Point,Rollback To Saved Point
- Context、预编译模式、DryRun 模式
- 批量插入,FindInBatches,Find/Create with Map,使用 SQL 表达式、Context Valuer 进行 CRUD
- SQL 构建器,Upsert,数据库锁,Optimizer/Index/Comment Hint,命名参数,子查询
- 复合主键,索引,约束
- Auto Migration
- 自定义 Logger
- 灵活的可扩展插件 API:Database Resolver(多数据库,读写分离)、Prometheus
- 每个特性都经过了测试的重重考验
- 开发者友好
2.GORM安装
go get -u gorm.io/gorm
go get -u gorm.io/driver/sqlite
3.GORM的使用
GORM基本使用
package main
import (
"gorm.io/gorm"
"gorm.io/driver/sqlite"
)
//定义gorm model
type Product struct {
gorm.Model
Code string
Price uint
}
func main() {
//连接数据库
db, err := gorm.Open(sqlite.Open("test.db"), &gorm.Config{})
if err != nil {
panic("failed to connect database")
}
// 迁移 schema
db.AutoMigrate(&Product{})
// Create 创建
db.Create(&Product{Code: "D42", Price: 100})
// Read 读写
var product Product
db.First(&product, 1) // 根据整型主键查找
db.First(&product, "code = ?", "D42") // 查找 code 字段值为 D42 的记录
// Update - 将 product 的 price 更新为 200
db.Model(&product).Update("Price", 200)
// Update - 更新多个字段
db.Model(&product).Updates(Product{Price: 200, Code: "F42"}) // 仅更新非零值字段
db.Model(&product).Updates(map[string]interface{}{"Price": 200, "Code": "F42"})
// Delete - 删除 product
db.Delete(&product, 1)
}
- gorm.Model可以嵌入在已有的结构体中,还可以进行权限控制。
- Gorm使用名为ID的字段作为主键,使用结构体的蛇形负数作为表名,字段名的蛇形作为列名。
- 使用
CreatedAt、UpdatedAt字段作为创建、更新时间。
GORM支持的数据库
- GORM 目前支持 MySQL, SQLServer, PostgreSQL, SQLite。
- GORM 通过驱动来连接数据库,如果需要连接其它类型的数据库,可以复用/自行开发驱动。
GORM基本操作
-
创建数据
-
查询数据
- 注意:使用 First 时,需要注意查询不到数据会返回ErrRecordNotFound。使用 Find 查询多条数据,查询不到数据不会返回错误。
-
更新数据
- 使用 Struct 更新时,只会更新非零值,如果需要更新零值可以使用Map更新或使用Select 选择字段。
-
删除数据
- 分为物理删除和软删除(grom.DeletedAt用于软删,Unscoped可查询被软删的数据)
-
使用事务
- Gorm 提供了 Begin、Commit、Rollback 方法用于使用事务
- Gorm 提供了 Tansaction 方法用于自动提交事务,避免用户漏写 Commit、Rollbcak。
- Gorm 提供了 Begin、Commit、Rollback 方法用于使用事务
-
Hock:在创建、查询、更新、删除等操作之前、之后自动调用的函数。如果任何Hook 返回错误, GORM将停止后续的操作并回滚事务。
// 开始事务
BeforeSave
BeforeCreate
// 关联前的 save
// 插入记录至 db
// 关联后的 save
AfterCreate
AfterSave
// 提交或回滚事务
func (u *User) BeforeCreate(tx *gorm.DB) (err error) {
u.UUID = uuid.New()
if! u.IsValid() {
err = errors.New("can't save invalid data")
}
return
}
func (u *User) AfterCreate(tx *gorm.DB) (err error) {
if u.ID == 1 {
tx.Model(u).Update("role", "admin")
}
return
}
- 性能提高
- 可使用 SkipDefaultTransaction 关闭默认事务。
- 使用 PrepareStmt 缓存预编译语句可以提高后续调用的速度。
GORM常用扩展
2.Kitex
1.安装
本地开发环境是Windows建议使用虚拟机orWSL2
安装代码生成工具:
go install github.com/cloudwego/kitex/tool/cmd/kitex@latest
go install github.com/cloudwego/thriftgo@latest
定义IDL
namespace go api
struct Request {
1: string message
}
struct Response {
1: string message
}
service Echo {
Response echo(1: Request req)
}
- 如果我们要进行PRC,就需要知道对方的接口是什么,需要传什么参数,同时也需要知道返回值时什么样的,这个时候,就需要通过IDL来约定双方的协议,就像在写代码的时候需要调用某个函数,我们需要知道函数签名一样。
Kitex生成代码
kitex -module example -service example echo.thrift
文件目录如下:
- build.sh :构建脚本
- kitex_gen:IDL 内容相关的生成代码,主要是基础的Server/Client 代码。
- main.go 程序入口
- handler.go用户在该文件里实现IDLservice 定义的方法
2.使用
- 服务默认监听8888端口
- 创建Client
echo.NewClient用于创建client,其第一个参数为调用的 服务名,第二个参数为options,用于传入参数, 此处的client.WithHostPorts用于指定服务端的地址
import "example/kitex_gen/api/echo"
import "github.com/cloudwego/kitex/client"
...
c, err := echo.NewClient("example", client.WithHostPorts("0.0.0.0:8888"))
if err != nil {
log.Fatal(err)
}
- 发起请求
import "example/kitex_gen/api"
...
req := &api.Request{Message: "my request"}
resp, err := c.Echo(context.Background(), req, callopt.WithRPCTimeout(3*time.Second))
if err != nil {
log.Fatal(err)
}
log.Println(resp)
- 服务注册与发现
- Kitex 的服务注册与发现已经对接了主流了服务注册与发现中心,如 ETCD,Nacos 等。
func main() {
r, err := etcd.NewEtcdResolver([]string{"127.0.0.1:2379"})
if err != nil {
log.Fatal(err)
}
client := hello.MustNewClient("Hello", client.WithResolver(r))
for {
ctx, cancel := context.WithTimeout(context.Background(), time.Second*3)
resp, err := client.Echo(ctx, &api.Request{Message: "Hello"})
cancel()
if err != nil {
log.Fatal(err)
}
log.Println(resp)
time.Sleep(time.Second)
}
}
3.常用拓展
3.Hertz
1.使用
基本使用
package main
import (
"context"
"github.com/cloudwego/hertz/pkg/app"
"github.com/cloudwego/hertz/pkg/app/server"
"github.com/cloudwego/hertz/pkg/common/utils"
"github.com/cloudwego/hertz/pkg/protocol/consts"
)
func main() {
h := server.Default()
h.GET("/ping", func(c context.Context, ctx *app.RequestContext) {
ctx.JSON(consts.StatusOK, utils.H{"message": "pong"})
})
h.Spin()
}
- 使用 Hertz实现,服务监听8080端口并注册了一个GET方法的路由函数。
路由
- Hertz 提供了 GET、POST、PUT、DELETE、ANY 等方法用于注册路由。
package main
import (
"context"
"github.com/cloudwego/hertz/pkg/app"
"github.com/cloudwego/hertz/pkg/app/server"
"github.com/cloudwego/hertz/pkg/protocol/consts"
)
func main(){
h := server.Default(server.WithHostPorts("127.0.0.1:8080"))
h.StaticFS("/", &app.FS{Root: "./", GenerateIndexPages: true})
h.GET("/get", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "get")
})
h.POST("/post", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "post")
})
h.PUT("/put", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "put")
})
h.DELETE("/delete", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "delete")
})
h.PATCH("/patch", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "patch")
})
h.HEAD("/head", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "head")
})
h.OPTIONS("/options", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "options")
})
h.Any("/ping_any", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "any")
})
h.Handle("LOAD","/load", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "load")
})
h.Spin()
}
- Hertz 提供了路由组的能力,用于支持路由分组的功能
package main
import (
"context"
"github.com/cloudwego/hertz/pkg/app"
"github.com/cloudwego/hertz/pkg/app/server"
"github.com/cloudwego/hertz/pkg/protocol/consts"
)
func main(){
h := server.Default(server.WithHostPorts("127.0.0.1:8080"))
v1 := h.Group("/v1")
v1.GET("/get", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "get")
})
v1.POST("/post", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "post")
})
v2 := h.Group("/v2")
v2.PUT("/put", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "put")
})
v2.DELETE("/delete", func(ctx context.Context, c *app.RequestContext) {
c.String(consts.StatusOK, "delete")
})
h.Spin()
}
- Hertz 提供了参数路由和通配路由,路由的优先级为:静态路由 > 命名路由 > 通配路由
参数绑定和校验
- Hertz 提供了
Bind、Validate、BindAndValidate函数用于进行参数绑定和校验。
func main() {
r := server.New()
r.GET("/hello", func(c context.Context, ctx *app.RequestContext) {
// 参数绑定需要配合特定的go tag使用
type Test struct {
A string `query:"a" vd:"$!='Hertz'"`
}
// BindAndValidate
var req Test
err := ctx.BindAndValidate(&req)
...
// Bind
req = Test{}
err = ctx.Bind(&req)
...
// Validate,需要使用 "vd" tag
err = ctx.Validate(&req)
...
})
...
}
中间件
- 分为两大类:服务端中间件和客户端中间件,下面是一个服务端中间件的实现:
func MyMiddleware() app.HandlerFunc {
return func(ctx context.Context, c *app.RequestContext) {
// pre-handle
// ...
c.Next(ctx)
}
}
Client
- Hertz提供了HTTP Client用于帮助用户发送HTTP请求
代码生成工具
- Hertz提供了代码生成工具Hz,通过定义IDL文件即可生成对应的基础服务代码。
- 安装hz:
go install github.com/cloudwego/hertz/cmd/hz@latest
- 用thrift IDL创建新项目,下面是thrift IDL文件:
// idl/hello.thrift
namespace go hello.example
struct HelloReq {
1: string Name (api.query="name"); // 添加 api 注解为方便进行参数绑定
}
struct HelloResp {
1: string RespBody;
}
service HelloService {
HelloResp HelloMethod(1: HelloReq request) (api.get="/hello");
}
- 生成代码的目录结构如下:
2.常用扩展
4.项目实战
1.介绍
笔记项目是一个使用 Hertz、Kitex、 Gorm 搭建出来的具备一定业务逻辑的后端 API 项目。