golang单元测试及mock总结

news/2024/5/14 12:06:56

文章目录

    • 一、前言
      • 1、单测的定位
      • 2、vscode中生成单测
    • 二、构造测试case的注意事项
      • 1、项目初始化
      • 2、构造空interface{}
      • 3、构造结构体的time.Time类型
      • 4、构造json格式的test case
    • 三、运行单测文件
      • 1、整体运行单测文件
      • 2、运行单个单测文件报错
        • (1)command-line-arguments是什么
        • (2)undefined发生原因
        • (3)缺少初始化导致的发生panic
      • 3、查看单测覆盖率
      • 4、单测覆盖文件解读
      • 5、生成可被浏览器打开的单测文件
      • 6、单测覆盖率的问题
    • 四、关于单测粒度的问题
      • 1、chatgpt的回答
      • 2、个人理解
    • 五、mock数据
      • 1、mock组件选择
      • 2、mock实操
        • (1)mock函数调用
        • (2)mock方法调用
        • (3)mock其他包的函数
        • (4)mock循环中的函数
        • (5)mock http调用
      • 3、对于mock的看法

一、前言

1、单测的定位

      单测在软件工程中的地位毋庸置疑,它要求工程师必须去主动思考代码的边界,异常处理等等。另一方面,它又是代码最好的说明书,你的函数具体做了什么,输入和输出一目了然。

      计算机科学家Edsger Dijkstra曾说过:“测试能证明缺陷存在,而无法证明没有缺陷。”再多的测试也不能证明一个程序没有BUG。在最好的情况下,测试可以增强我们的信心:代码在很多重要场景下是可以正常工作的。

参考:go语言圣经之测试函数

2、vscode中生成单测

参考:在 VS Code 快速生成单元测试

      vscode生成单元测试如下,我们需要编写测试用例数组,明确指出来want结果以及wantErr,通过遍历的方式去执行测试用例数组。

func TestGenerateStsTokenService(t *testing.T) {type args struct {ctx             context.ContextgenerateStsData *dto.GenerateStsReqParams}tests := []struct {name     stringargs     argswantResp *common.RESTRespwantErr  bool}{{name: "测试正常生成sts",args: args{ctx: context.TODO(),generateStsData: &dto.GenerateStsReqParams{SessionName: "webApp",AuthParams:  &dto.AuthParamsData{},},},wantResp: &common.RESTResp{Code: 0,Data: &dto.OssStsRespData{},},wantErr: false,},{name: "测试异常生成sts",args: args{ctx: context.TODO(),generateStsData: &dto.GenerateStsReqParams{SessionName: "liteApp",AuthParams:  &dto.AuthParamsData{},},},wantResp: &common.RESTResp{Code: 20003,Data: interface{}(nil),},wantErr: true,},}for _, tt := range tests {t.Run(tt.name, func(t *testing.T) {gotResp, err := GenerateStsTokenService(tt.args.ctx, tt.args.generateStsData)if (err != nil) != tt.wantErr {t.Errorf("GenerateStsTokenService() error = %v, wantErr %v", err, tt.wantErr)return}if !reflect.DeepEqual(gotResp, tt.wantResp) {t.Errorf("GenerateStsTokenService() = %v, want %v", gotResp, tt.wantResp)}})}
}

二、构造测试case的注意事项

1、项目初始化

// TestMain会在执行其他测试用例的时候,自动执行
func TestMain(m *testing.M) {setup()  //初始化函数retCode := m.Run() // 运行单元测试teardown() //后置校验,钩子函数,可不实现os.Exit(retCode) //清理结果
}

2、构造空interface{}

// 直接给Data赋值为nil的话,验证会失败,
// 单纯的nil和(*infra.QueryOneMappingCode)(nil)是不一样的
wantResp: &common.RESTResp{Code:    0,Message: "",Data:    (*infra.QueryOneMappingCode)(nil),},// 数组类型的空
// []dto.OneMappingCode{}也会验证失败
wantRes: []dto.OneMappingCode(nil),

3、构造结构体的time.Time类型

Data: &infra.xxx{ID:          54,Code:        "338798",TakerUid:    "",State:       1,Type:        1,CreatedAt: time.Date(2023, time.June, 9, 16, 32, 59, 0, time.Local),},也可以直接打印接口的返回,看看CreatedAt返回的是什么,然后构造一下就可以。
t.Logf("gotResp:(%#v)", gotResp.Data)

4、构造json格式的test case

wantResp: &common.RESTResp{Code:    0,Message: "success",Data: `{"id": 54,"code": "338798","creator_uid": "12345","client_appId": "1234","taker_uid": "","state": 1,"type": 1,"created_at": "2023-06-09T16:32:59+08:00"}`,},

三、运行单测文件

1、整体运行单测文件

  cd /xxx 单测目录go test成功输出:PASSok

2、运行单个单测文件报错

错误提示如下:

# command-line-arguments [command-line-arguments.test]
./base_test.go:26:18: undefined: Ping

      明明Ping函数和单测文件都在同一个包下面,为什么会出现undefined呢?command-line-arguments是什么?
答:

(1)command-line-arguments是什么

go test [flags] [packages] [build flags] [packages]
命令行参数中指定的每个包或文件都将被视为一个要进行测试的包。而 "command-line-arguments" 
这个标识符就是用来表示上述情况中命令行参数中指定的文件。这样可以使 go test 命令将指定的文件作为单独的包进行处理,并执行其中的测试函数。

(2)undefined发生原因

错误提示build失败,也就是说我们需要把单测文件依赖的文件也传入进去。比如我这里单测base_test.go文件,则需要把base.go也写到命令行参数中。
具体参考:【Golang】解决Go test执行单个测试文件提示未定义问题

go test ./base.go ./base_test.go

(3)缺少初始化导致的发生panic

一般来说我们在一个package下,定义一个TestMain()函数就可以了,进行代码的初始化。但是当我们需要运行单个测试文件的时候,有可能这个测试文件里面恰好没有TestMain()了咋整。

api_test.goTestMain()
base_test.go // 没有TestMain()函数// 解决方案
1、初始化代码放到setup()函数中
2go命令行
go test ./base.go ./base_test.go ./api_test.go ./api.go
3、只想运行base_test.go怎么办base_test.go中加上自己的setuoBase()

3、查看单测覆盖率

go test -covercoverage: 80.4% of statements

4、单测覆盖文件解读

go test -coverprofile=coverage.out// 打开单测覆盖率文件
mode: set
base.go:10.118,14.23 3 1
base.go:14.23,17.3 2 1解释如下:10.118,14.23 3 1 表示第 10 行到第 14 行代码被测试覆盖到了,且覆盖率为 3/1 (300%)。这是因为第 10 行至少执行了一次,如果执行了三次,则覆盖率为 300%14.23,17.3 2 1 表示第 14 行到第 17 行代码被测试覆盖到了,且覆盖率为 2/1 (200%)

5、生成可被浏览器打开的单测文件

go test -coverprofile=coverage.out
go tool cover -html=coverage.out -o coverage.html

绿色代表被覆盖到的代码,红色代表没有被覆盖到的代码。
左上角是运行单测命令目录下,所有go文件的覆盖率。
可以考虑新增单测case来覆盖到这部分红色。
在这里插入图片描述

6、单测覆盖率的问题

      覆盖率为 100% 表示测试用例覆盖了所有的可能执行路径,即程序的所有功能都被覆盖到了。而覆盖率高于 100% 则表示相同的代码路径被多次测试或某些代码行在被测试期间被执行了多次。

      但是单测100%并不能保证没有bug,只能保证写出来的代码没问题,但逻辑或者业务上的漏洞是检测不到的。

      博主在滴滴的组是建议单测覆盖率50%以上,其他朋友的公司要求核心接口必须有单测,整体单测覆盖率30%以上。有需要的可以参考下。

四、关于单测粒度的问题

      写单测的时候,总会疑问到底要写的多细呢?特别是原来项目没有单测的时候,补单测的代码比业务逻辑代码还多。。。
本例中,目录结构如下:

domain:base.gocode.gocode_test.goutil.go

code.go会调用base.goutil.go的函数,运行code_test.go发现单测覆盖率
已经80%了,是不是意味着只需要写个code_test.go就可以了呢?

1、chatgpt的回答

      实际上不是的,base.goutil.go后续还可能被其他的文件使用,我们写单测的时候,应该尽量覆盖所有的异常情况,也就是程序的边界问题。因此base.goutil.go也需要做对应的单测,这样才能得到高质量的代码。

2、个人理解

      单个code_test.go文件导致的问题是下层函数不mock,可能会影响到实际的数据,导致单测只能运行一次,而不能一直PASS。其次是代码流程变长导致单测case越写越多,接近集成测试了,这不是我们单测的目标。

      把code_test.go中关于base.goutil.go的函数都给mock掉,发现单测覆盖率只有37%,且测试路径比较短。还需要分别写base_test.go和util_test.go,写完util_test.go单测覆盖率立马82%

      拆分的粒度变细,更加关注每个函数的输入和输出。特别是当修改某个函数的时候,只需要使用对应的单测来进行验证,而不需要从入口处进行测试。毕竟单元测试不是集成测试。

参考:
Golang 单元测试:有哪些误区和实践?
Go的单元测试技巧

五、mock数据

      在写单测的时候,程序难免会出现各种跨文件的函数调用,以及操作第三方中间件或者上下游交互的情况,这个时候mock就显得尤为重要。

      想象下,没有mock的时候,我们运行单测可能就会写入一次数据库?或者对下游发起一次请求?这样的单测,怕是只能运行一次哟。mock的出现让我们关注代码的实现细节,不会担心会造成数据污染或者单测只能运行一遍就GG的情况。

1、mock组件选择

参考:如何做好单元测试?Golang Mock”三剑客“ gomock、monkey、sqlmock
GO进阶单元测试

在这里插入图片描述

      博主这里更喜欢无侵入的mock,直接一把梭。可惜monkey已经不更新了,现在都是用gomonkey,国人大佬开发的

gomonkey 项目库
解析 Golang 测试(8)- gomonkey 实战

2、mock实操

(1)mock函数调用

      函数中存在大量的封装调用,比如A->BA->C这种,因此自由mock BC函数对我们的单元测试来说还是很重要的。

patches := gomonkey.ApplyFunc(queryOneMappCode, func(ctx context.Context, code string) (*infra.QueryOneMappingCode, error) {// 参数大于6则返回空if len(code) > 6 {return nil, nil}return &infra.QueryOneMappingCode{ID:          54,Code:        "338798",CreatedAt:   time.Date(2023, time.June, 9, 16, 32, 59, 0, time.Local),}, nil})defer patches.Reset()

(2)mock方法调用

1、实例化接口
var mockProvider = provider.Test
// 接口如下
type TestDbProvider interface {SetDb(db *sqlx.DB)GetOne(dest interface{}, sql string, args interface{}) (resp *infra.QueryOneMappingCode, err error)
}2、mock对应的查询方法
// 注意,第一个参数不能是指针,不然mock会失效
// 例如 var oss_bucket_obj *oss.Bucket ,传入target为: *oss_bucket_obj
// 传地址会报错
patches := gomonkey.ApplyMethodFunc(mockProvider, "GetOne", func(dest interface{}, sql string, args interface{}) (resp *infra.QueryOneMappingCode, err error) {code := args.(string)if code == "123456" {return &infra.QueryOneMappingCode{ID:          1,Code:        "123456",CreatedAt:   time.Date(2023, time.June, 9, 16, 32, 59, 0, time.Local),}, nil} else if code == "456789" {return &infra.QueryOneMappingCode{ID:          1,Code:        "456789",CreatedAt:   time.Date(2023, time.June, 9, 16, 32, 59, 0, time.Local),}, nil} else {return nil, nil}})defer patches.Reset()

(3)mock其他包的函数

xx_test文件中直接引用其他包即可。一般xx_test.goxx.go在同一个包下,所以也不用担心出现循环引用的问题。

patches := gomonkey.ApplyFunc(util.GenerateRandomCode, func(numDigits int) string {return "123456"})defer patches.Reset()

(4)mock循环中的函数

比如在A函数中,循环3次调用了B函数,那么mock如下:

createA := &infra.CreateMappingCode{Code: "933903"}createB := &infra.CreateMappingCode{Code: "601690"}createC := &infra.CreateMappingCode{Code: "798493"}p := gomonkey.ApplyFuncSeq(structureMappingCodeRecord, []gomonkey.OutputCell{{Values: gomonkey.Params{createA}},{Values: gomonkey.Params{createB}},{Values: gomonkey.Params{createC}},})defer p.Reset() // 恢复原始函数

(5)mock http调用

// vscode自动生成的test代码
for _, tt := range tests {t.Run(tt.name, func(t *testing.T) {// mock httptestts := httptest.NewServer(http.HandlerFunc(func(w http.ResponseWriter, r *http.Request) {if r.Method != http.MethodGet {w.WriteHeader(http.StatusNotFound)}// 构造返回参数w.WriteHeader(http.StatusOK)// 获取POST请求的参数,根据参数返回不同的响应bodyBytes, err := io.ReadAll(r.Body)if err != nil {// 处理错误w.WriteHeader(http.StatusBadRequest)}// 获取post参数params := new(dto.GenerateStsReqParams)json.Unmarshal(bodyBytes, params)// 根据传递的参数返回不同的响应res := new(common.RESTResp)if params.SessionName == "webApp" {res = &common.RESTResp{Code:    0,Message: "success",Data: &dto.OssStsRespData{Region:          "hangzhou",Bucket:          "test",},}} else {res = &common.RESTResp{Code:    1,Message: "failed",Data:    &dto.OssStsRespData{},}}// 模拟接口的返回,http接口返回是字节数据,因此需要json.MarshaljsonStr, _ := json.Marshal(res)w.Write(jsonStr)}))defer ts.Close()// 替换原来的url为mock的urlGenerateOssStsUrl = ts.URL// 发起请求,请求中的http会被mock掉gotResp, err := GenerateStsTokenService(tt.args.ctx, tt.args.generateStsData)if (err != nil) != tt.wantErr {t.Errorf("GenerateStsTokenService() error = %v, wantErr %v", err, tt.wantErr)return}t.Logf("gotResp:(%#v) ,wantResp:(%#v)", gotResp, tt.wantResp)if !reflect.DeepEqual(gotResp, tt.wantResp) {t.Errorf("GenerateStsTokenService() = %v, want %v", gotResp, tt.wantResp)}})}

3、对于mock的看法

对于mock,有以下两种态度

一方的人主张不要滥用mock,能不mock就不mock。被测单元也不一定是具体的一个
函数,可能是多个函数本来就应该串起来,必要的时候再mock。一方则主张将被测函数所有调用的外面函数全部mock掉,只关注被测函数自己的
一行行代码,只要调用其他函数,全都mock掉,用假数据来测试。

本来处于懒惰和少写单测的角度,我是支持第一种方式的。

例如:
单测函数:A函数
内部逻辑:A->B : B函数全是业务逻辑A->C : C函数包括mysql或者redis操作A->D->E: D函数纯业务逻辑,构造请求参数。E函数对外发起http请求

      第一种方式是只mock CE函数,测试A函数的时候,会把BD也测试到。主打一个省事快捷。

      直到我遇到了更复杂的场景,B里面还有B1B2函数,D里面有D1D2函数,逻辑非常复杂的情况下,第一种方式就变成了集成测试。单测用例慢慢变成了测试用例。 比如只修改D2函数的情况下,要修改和通过单测A进行测试。。。。

      第二种方式,就是在每一层都mock掉外部调用。单测A就只关注A的逻辑,mockB,C,D,E,只关注B,C,D,E输出是正确或者错误的情况。
针对B,C,D,E函数又有自己的单测函数,充分覆盖掉。这样当修改D2函数的时候,只需要修改和通过D2的单测即可。

      对于外部依赖,比如第三方库mysql,redis,mq这种统一进行mock。 对于内部的函数调用,建议是粒度细一些,A_test.go就只对A.go里面的逻辑负责。至于调用B.go的部分,就交给B_test.go吧。

end


http://www.mrgr.cn/p/51257475

相关文章

IO流(2)-缓冲流

1. 缓冲流的简单介绍 我们上贴说到了 FileInputStream,FileOutputStream,FileReader,FileWriter。 其实这四个流,我们通常把它叫做原始流,它们是比较偏底层的;而今天我们要说的四个缓冲流,如…

微服务 云原生:搭建 K8S 集群

为节约时间和成本,仅供学习使用,直接在两台虚拟机上模拟 K8S 集群搭建 踩坑之旅 系统环境:CentOS-7-x86_64-Minimal-2009 镜像,为方便起见,直接在 root 账户下操作,现实情况最好不要这样做。 基础准备 关…

vins调试的注意事项

1、摄像头的内参和畸变矫正系数 这个系数不对,没法做,因为下一步没法做对。这个会导致系统无法初始化。 2、对畸变的像素点,求得归一化坐标的方法 理解不同矫正模型的原理,确保矫正对了,得到z1平面的去畸变点。 3、摄…

map,set的封装(基于改造红黑树)

目录 引言 1.迭代器 2.map的[]重载 3.KeyOfValue模板参数 4.整体代码展示 //改造后的红黑树代码 #include <iostream> using namespace std;enum Colour {RED 0,BLACK, };//为了实现map与set封装使用同一个模板红黑树&#xff0c;前者的value是pair&#xff0c;后者…

【玩转Python系列【小白必看】Python多线程爬虫:下载表情包网站的图片

文章目录 前言1. 导入模块和库2. 定义函数 download_image(url, filepath)3. 定义函数 get_page()4. 主程序入口 完整代码运行效果 结束语 前言 本文主要介绍了使用Python编写的多线程爬虫程序&#xff0c;用于下载表情包网站上的图片。通过解析网页内容和使用XPath定位&#x…

python爬虫基础

文章目录 前言爬虫简介urllib库的使用如何获取网页的源码一个类型六个方法一个类型六个方法1、read()方法2、readline()方法3、readlines()方法4、getcode()5、geturl()6、getheaders() urllib下载下载网页下载图片下载视频 请求对象的定制 未完待续 前言 爬虫爬的好牢饭吃的早…

关于K8s的Pod的详解(一)

关于K8s的Pod的详解&#xff08;一&#xff09; Pod和API server的通信加快Pod启动更改Pod的资源Pod 的持久卷的单个访问模式Pod 拓扑分布约束Pod 拓扑分布中的最小域数 Pod 作为k8s创建&#xff0c;调度&#xff0c;管理的基本单位。由上级的Controller对Node上安装的Kubelet发…

云安全攻防(二)之 云原生安全

云原生安全 什么是云原生安全&#xff1f;云原生安全包含两层含义&#xff1a;面向云原生环境的安全和具有云原生特征的安全 面向云原生环境的安全 面向云原生环境的安全的目标是防护云原生环境中的基础设施、编排系统和微服务系统的安全。这类安全机制不一定会具有云原生的…

基于SaaS模式的Java基层卫生健康云HIS系统源码【运维管理+运营管理+综合监管】

云HIS综合管理平台 一、模板管理 模板分为两种&#xff1a;病历模板和报表模板。模板管理是运营管理的核心组成部分&#xff0c;是基层卫生健康云中各医疗机构定制电子病历和报表的地方&#xff0c;各医疗机构可根据自身特点特色定制电子病历和报表&#xff0c;制作的电子病历…

Web-1-网站工作流程介绍

我们学习web开发&#xff0c;首先要知道什么是Web&#xff1f; Web: 全球广域网&#xff0c;也称为万维网(www World Wide Web)&#xff0c;能够通过浏览器访问的网站 比如我展示的这京东&#xff0c;淘宝唯品会都叫做网站&#xff0c;那么现在大家想一下&#xff0c;你还知道什…

论文笔记:Adjusting for Autocorrelated Errors in Neural Networks for Time Series

2021 NIPS 原来的时间序列预测任务是根据预测论文提出用一阶自回归误差预测 一阶差分&#xff0c;类似于ResNet的残差思路&#xff1f;记为pred&#xff0c;最终的预测结果

解决PicGo上传图片失败错误信息和上传图片失败包404错误以及Typora怎么一键导入本地图片到PicGo

&#x1f600;前言 解决PicGo上传图片失败错误信息和上传图片失败包404错误以及Typora怎么一键导入本地图片到PicGo &#x1f3e0;个人主页&#xff1a;尘觉主页 &#x1f9d1;个人简介&#xff1a;大家好&#xff0c;我是尘觉&#xff0c;希望我的文章可以帮助到大家&#x…

beego通过gorm访问mysql数据库

一、下载golang 二、解压下载包到C盘 三、配置golang系统环境变量 四、进入新建的工作目录C:\project下载并安装beego 五、将新生成的bee.exe所在的路径c:\project\bin加入到系统变量path里面 六、下载并安装mysql 例如在上图中&#xff0c; 选“No thanks,just start my down…

【unity之IMGUI实践】单例模式管理数据存储【二】

&#x1f468;‍&#x1f4bb;个人主页&#xff1a;元宇宙-秩沅 &#x1f468;‍&#x1f4bb; hallo 欢迎 点赞&#x1f44d; 收藏⭐ 留言&#x1f4dd; 加关注✅! &#x1f468;‍&#x1f4bb; 本文由 秩沅 原创 &#x1f468;‍&#x1f4bb; 收录于专栏&#xff1a;uni…

自动化运维工具—Ansible概述

Ansible是什么&#xff1f; Ansible是一个基于Python开发的配置管理和应用部署工具&#xff0c;现在也在自动化管理领域大放异彩。它融合了众多老牌运维工具的优点&#xff0c;Pubbet和Saltstack能实现的功能&#xff0c;Ansible基本上都可以实现。 Ansible能批量配置、部署、…

无涯教程-jQuery - Dropable移动函数

Drop-able 功能可与JqueryUI中的交互一起使用。此功能可在任何DOM元素上启用可放置功能。 Drop able - 语法 $( "#droppable" ).droppable(); Drop able - 示例 以下是一个简单的示例&#xff0c;显示了drop-able的用法- <html><head><title>…

爬虫小白-如何调试列表页链接与详情链接不一样并三种方式js逆向解决AES-ECB

目录 一、网站分析二、定位监听三、熟悉AES-ECB四、调试分析五、node运行js六、Python执行js 一、网站分析 三年前的案例&#xff0c;我的原始文章网站 &#xff0c;如图我们直接点击标题进入到详情页&#xff0c;链接会发生跳转&#xff0c;且与我们在详情看到的链接&#xf…

左神算法之中级提升班(8)

目录 【案例1】 【题目描述】 【思路解析】 【代码实现】 【案例2】 【题目描述】 【思路解析】 【代码实现】 【案例3】 【题目描述】 【思路解析】 【案例4】 【题目描述】 【思路解析】 【代码实现】 【案例5】 【题目描述】 【子序列概念】 【思路解析1 经典…

[NLP]LLaMA与LLamMA2解读

摘要 Meta最近提出了LLaMA(开放和高效的基础语言模型)模型参数包括从7B到65B等多个版本。最值得注意的是&#xff0c;LLaMA-13B的性能优于GPT-3&#xff0c;而体积却小了10倍以上&#xff0c;LLaMA-65B与Chinchilla-70B和PaLM-540B具有竞争性。 一、引言 一般而言&#xff0…

020 - STM32学习笔记 - Fatfs文件系统(二) - 移植与测试

020 - STM32学习笔记 - Fatfs文件系统&#xff08;二&#xff09; - 移植与测试 上节学习了FatFs文件系统的相关知识&#xff0c;这节内容继续学习在STM32上如何移植FatFs文件系统&#xff0c;并且实现文件的创建、读、写与删除等功能。各位看官觉得还行的话点点赞&#xff0c…