【字节跳动青训营】后端笔记整理-3 | Go语言工程实践之测试

news/2024/5/20 15:19:36

**本文由博主本人整理自第六届字节跳动青训营(后端组),首发于稀土掘金:🔗Go语言工程实践之测试 | 青训营

目录

一、概述

1、回归测试

2、集成测试

3、单元测试

二、单元测试

1、流程

2、规则

3、单元测试的例子

4、assert

5、覆盖率

6、依赖

7、文件处理

三、Mock测试

四、基准测试


一、概述

测试主要包括:回归测试、集成测试、单元测试。

1、回归测试

用于验证已经修改或新增功能后,软件的既有功能是否受到影响。

它主要用于确保软件在经过修改后仍然能正确运行,并且新的更改没有引入新的错误或破坏原有的功能。

比如开发抖音产品,那么回归测试就是新增了一部分功能后,由负责质量保证的部门手动在终端创造一些特定的场景(比如刷一下抖音,看一下评论等)来检查功能是否正确。

2、集成测试

用于验证多个模块或组件在一起协同工作时的正确性。

它主要用于检查不同模块之间的交互和接口是否正常,以确保整个软件系统在集成后能够正常运行。在软件开发过程中,通常会将软件系统划分为多个模块或组件,每个模块负责实现不同的功能。

在集成测试中,这些模块会被组合在一起,并进行全面的测试,以验证它们之间的协作和接口是否正确。

3、单元测试

在开发阶段,开发者对单独的函数模块进行功能测试。单元测试用于验证程序中的各个独立模块(通常是函数或方法)是否按照预期进行工作。它是在软件开发中最小的测试单位,旨在测试代码的最小功能单元,以确保每个单元都能正确地完成其预定的功能。

层级从上到下,测试的覆盖率逐层变大,成本逐层降低。因此可以说,单元测试的覆盖率一定程度上决定了代码的质量。

  • 单元测试的成本较低,覆盖率较高,可以确保每个单元都能正确工作。
  • 集成测试的成本适中,覆盖率较低,主要用于验证不同模块之间的协作。
  • 回归测试的成本较高,主要用于验证整个系统的稳定性和功能性。

在实际开发中,这三种测试方法通常会结合使用,以便在不同的层次和阶段上确保软件的质量和稳定性。


二、单元测试

1、流程

单元测试主要包括输入、测试单元、输出以及校对。

单元测试的流程
  • “单元”的概念比较广,包括接口、函数、模块等等。
  • 用最后的校对来保证代码的功能与我们预期的相符。最后通过输出和期望值作校对,来验证代码的正确性。
  • 单元测试一方面可以保证质量。每次编写新代码并加入了单元测试,在代码整体覆盖率足够的情况下一方面保证了新功能本身的正确性,又未破坏原有的正确性;另一方面可以提升效率,在代码有bug的情况下通过编写单测,可以在一个较短的周期内定位和修复问题。

2、规则

(1)所有的测试文件都以 _test.go 结尾。这样可以很容易辨别哪些文件是 go 的源代码,哪些是测试代码。

(2)单元测试函数的命名规范,以Test开头,且Test后面的第一个字母大写。如TestDemo。

(3)单元测试提供了一个TestMain函数,TestMain是 Go 语言中测试包(testing)的一个特殊函数,用于在运行测试之前和之后执行一些初始化和收尾操作。它不是针对单个测试用例的,而是整个测试包的入口函数。它可以被用来替代测试函数的默认入口点 func TestXxx(t *testing.T)

TestMain的代码结构如下,它会在所有测试函数执行之前运行,并且可以在其中进行全局初始化和清理操作。然后,它会调用 m.Run() 启动所有测试函数的执行。

因为它是测试包的入口函数,所以只会执行一次。

需要注意的是,测试函数是并行执行的,所以不能依赖测试函数之间的执行顺序。

3、单元测试的例子

先在demo2.go文件中,创建一个HelloTom函数,预期返回"Tom"。

(这里为了测试,故意写成返回"Jerry"。)

//demo2.gopackage mainfunc HelloTom() string {return "Jerry"
}

然后生成测试文件: demo2_test.go。

Tips:如果使用 GoLand 为IDE,快捷键 alt+insert ,然后选择Test file,可以直接生成一个单元测试文件。

在demo2_test.go中编写以下测试代码:

package mainimport "testing"func TestHelloTom(t *testing.T) {output := HelloTom()  //运行HelloTom 接收返回值expectOutput := "Tom" //预期输出Tomif output != expectOutput {t.Errorf("Expected %s do not match actual %s", expectOutput, output)}
}

通过 if 的方式校对 output 是否与 expected 相等。如果相等,则测试PASS,不相等则FAIL。

除了直接用运算符来判断,还有更加简便的方式,即使用 assert。

4、assert

除了使用运算符进行校对,也有很多开源的assert包可以帮助我们实现预期和实际输出equal或not equal的比较。

导入开源的assert包:

github.com/stretchr/testify/assert

可以在终端使用以下命令获取依赖(如果没有下载过,直接引入包会报红):

​go get github.com/stretchr/testify/assert

调用 assert.Equal来对预期和实际输出进行比较。第二个参数是预期输出,第三个参数是实际输出:

package mainimport ("github.com/stretchr/testify/assert" // 导入开源的assert包"testing"
)func TestHelloTom(t *testing.T) {output := HelloTom()  //运行HelloTom 接收返回值expectOutput := "Tom" //预期输出Tom//if output != expectOutput {//	t.Errorf("Expected %s do not match actual %s", expectOutput, output)//}assert.Equal(t, expectOutput, output)    //直接调用包中的接口
}

运行结果:actual 和 expected 不符合,测试FAIL。

若将HelloTom模块返回的值改为Tom,再次执行单元测试:

可见此时单元测试的结果是PASS。

5、覆盖率

在我们进行单元测试时需要考虑以下问题:

如何衡量代码是否经过了足够的测试?如何评价项目的测试水准?如何评估项目是否达到了高水准测试等级?

单元测试的主要评估标准是代码覆盖率,覆盖率越高则证明越多的代码经过了测试。来看下面这个例子:

创建demo3.go,其中编写了一个判断分数是否及格的功能。

package mainfunc judgePass(score int) bool {//return score >= 60if score >= 60 {return true}return false
}

 生成测试文件demo3_test.go,调用 judgePass 并传入一个70,将结果与true校对。

package mainimport ("github.com/stretchr/testify/assert""testing"
)func Test_judgePass(t *testing.T) {isPass := judgePass(70)assert.Equal(t, true, isPass)
}

然后运行带有覆盖率(coverage)的测试。可以用命令单独测试某个模块(如demo3.go):

go test demo3_test.go demo3.go --cover

也可以在GoLand直接操作,点击右上角的run with coverage进行测试。测试工具会自动运行测试用例,并在执行过程中跟踪被执行的代码行数。最后,它会计算测试覆盖率并给出结果。(注意,这样执行的是该目录下的所有测试文件,给出的也是整个包的测试覆盖率结果。)

最终的代码覆盖率为66.7%。这是因为demo3.go中的3条语句在case为70时执行2条。

如果在 judgePass 中直接写成 return score >= 60,那么代码的覆盖率就会变成100%。因为这个函数中所有的语句都被执行过了。 

特别注意:直接点击run with coverage,执行的是该目录下的所有测试文件,给出的也是整个包的测试覆盖率结果。如果该目录下还有其它文件代码,执行测试用例后会发现覆盖率降低:

如何提升覆盖率?

刚才只是测试了70,覆盖率只有66.7%,还有部分代码没有被运行。我们希望提升覆盖率,因此可以多传入一些测试用例case。比如这里,再传入一个50:

coverage达到了 100%。

6、依赖

实际项目中,测试依赖的组件可能会很复杂。比如可能依赖一些数据库,文件,cache等。这些都属于项目中的强依赖(即是一个模块对于另一个模块存在紧密的依赖关系。当一个组件的实现或功能发生变化时,会直接影响到依赖它的其他组件的正确性或稳定性)。

而单元测试的两个目标是幂等和稳定:

  • 幂等:重复运行一个测试,其结果都是一样的。
  • 稳定:单元测试是相互隔离的,在任何时间任何函数都可运行。

其实,直接写单元测试可能是不稳定的,因为它可能存在一些依赖,如网络等。解决这个问题,可以在单元测试时使用mock测试。

7、文件处理

可以用文件依赖来演示一下单元测试中的依赖问题。

首先创建文件 log.txt,其中内容如下:

创建demo4.go,编写函数用于实现“读取文件的第一行”这一功能。

package mainimport ("bufio""os""strings"
)func ReadFirstLine() string {// 打开一个文件open, err := os.Open("log.txt")// defer关键字,用于延迟函数的执行// 这里的作用是在函数 ReadFirstLine() 执行结束后即使发生错误或提前返回,// 也会确保文件资源 open 被及时关闭,避免资源泄漏。defer open.Close()// 判断是否发生errorif err != nil {return ""}// 创建文件扫描器scannerscanner := bufio.NewScanner(open)for scanner.Scan() {// 只读取第一行的内容 返回return scanner.Text() // 用于获取scanner当前所在位置的文本内容}return ""
}func ProcessFirstLine() string {// 读取文件中的行line := ReadFirstLine()// 把读到的行进行字符串替换,把11替换成00destLine := strings.ReplaceAll(line, "11", "00")return destLine
}

生成单元测试。同时创建log.txt文件进行文件操作。 

package mainimport ("github.com/stretchr/testify/assert""testing"
)func Test(t *testing.T) {firstLine := ProcessFirstLine()assert.Equal(t, "line00", firstLine) // 别忘了第二个参数是expected,第三个是actual
}

运行:

这里对文件 log.txt 的依赖就是强依赖。

一旦文件被别人篡改,那测试文件可能也会受到影响,甚至无法执行。这样就无法达到单元测试幂等、稳定的目标。


三、Mock测试

Mock(模拟)是一种测试技术,用于在测试代码时替代某些依赖项或功能,以便进行可控制和可预测的测试。这种技术的目的是模拟真实环境中的特定行为,从而使开发人员能够对软件的不同部分进行独立测试,而不需要依赖其他组件的完整性或稳定性。

打桩(Stubbing)是Mock技术的一种应用。它是在单元测试中使用模拟对象(通常称为“桩”或“stub”)代替真实的依赖项或功能,以模拟这些依赖项或功能的行为。打桩的目的是在测试代码的过程中隔离被测试代码,并使测试更简单、可控、可重复和高效。

举个例子,假设有一个函数A,它依赖于函数B的返回结果。在单元测试函数A时,我们可以打桩函数B的行为,使其返回我们预先设定好的值,而不是实际去调用函数B。这样就能够独立地测试函数A的逻辑,而不必担心函数B的实际行为。

演示一下对 demo4.go 中的 ReadFirstLine 进行打桩测试,不再依赖本地文件:

首先引入monkey:bou.ke/monkey

monkey是一个开源的mock测试库,可以对函数或方法进行mock。这是monkey中的打桩函数和卸载打桩函数:

我们就调用它们来实现mock。在测试文件中编写以下代码:

package mainimport ("bou.ke/monkey""github.com/stretchr/testify/assert""testing"
)func TestProcessFirstLine(t *testing.T) {// 调用打桩函数 打桩函数实现了mock的功能// 对ReadFirstLine进行打桩操作,替换函数为输出“line110”monkey.Patch(ReadFirstLine, func() string {return "line11"})// 使用defer完成打桩函数的卸载defer monkey.Unpatch(ReadFirstLine)// 再次获取函数的返回值firstLine := ProcessFirstLine()// 通过mock,就避免了对log.txt的强依赖。这个单元测试可以在任何时间任何环境去执行assert.Equal(t, "line00", firstLine)
}

调用打桩函数,模拟ReadFirstLine函数的功能。这样,在该测试模块中并没有实际调用ReadFirstLine函数,也没有用到 log.txt ,但是也能完成测试。而且不会因为文件遭到破坏而无法验证。


四、基准测试

go中也提供了基准测试的框架。在 Go 语言中,基准测试用于衡量代码的性能(如运行性能和cpu损耗),特别是在处理大量数据时的性能表现。在实际中,当遇到代码性能瓶颈时,为了定位问题经常要对代码做性能分析,这就用到了基准测试。基准测试的使用方法类似于单元测试。

创建demo5.go,这是一个模拟随机选择服务器的程序:

package mainimport "math/rand"var ServerIndex [10]intfunc InitServerIndex() {for i := 0; i < 10; i++ {ServerIndex[i] = i + 100}
}func Select() int {// 模拟通过下标来随机选择服务器return ServerIndex[rand.Intn(10)]
}

编写测试文件,下面写了两个基准测试函数:

package mainimport ("testing"
)func BenchmarkSelect(b *testing.B) {InitServerIndex()b.ResetTimer() //定时器重置,因为函数InitServerIndex不属于要测试的函数的损耗,所以计时要把这个时间去掉for i := 0; i < b.N; i++ {Select()}
}// 基准测试也支持并行
func BenchmarkSelectParallel(b *testing.B) {InitServerIndex()b.ResetTimer()b.RunParallel(func(pb *testing.PB) {for pb.Next() {Select()}})
}
  1. BenchmarkSelect:这个基准测试函数用于测试 Select 函数的性能。在基准测试开始之前,调用 InitServerIndex 函数进行初始化工作。然后,通过循环运行 Select 函数 b.N 次,b.N 表示测试运行的迭代次数。

  2. BenchmarkSelectParallel:这个基准测试函数也用于测试 Select 函数的性能,不同之处在于它使用了并行测试。通过 b.RunParallel 函数,我们可以在多个 goroutine 中并行运行 Select 函数。这样可以更好地利用多核处理器的性能,加快测试的执行速度。

运行结果: 

基准测试也支持并行执行,但是可见并行去做基准测试的情况下,它的性能退化了。原因是Select中用到了rand函数,而rand为了保证全局的随机性和并发安全,它持有全局锁。因此就降低了并发的性能。

用fastrand可以提升性能。后期如果有随机场景,推荐使用fastrand。


http://www.mrgr.cn/p/22816147

相关文章

卷积神经网络识别人脸项目—使用百度飞桨ai计算

卷积神经网络识别人脸项目的详细过程 整个项目需要的准备文件&#xff1a; 下载链接&#xff1a; 链接&#xff1a;https://pan.baidu.com/s/1WEndfi14EhVh-8Vvt62I_w 提取码&#xff1a;7777 链接&#xff1a;https://pan.baidu.com/s/10weqx3r_zbS5gNEq-xGrzg 提取码&#x…

Transformer 论文学习笔记

重新学习了一下&#xff0c;整理了一下笔记 论文&#xff1a;《Attention Is All You Need》 代码&#xff1a;http://nlp.seas.harvard.edu/annotated-transformer/ 地址&#xff1a;https://arxiv.org/abs/1706.03762v5 翻译&#xff1a;Transformer论文翻译 特点&#xff1…

网络面试合集

传输层的数据结构是什么&#xff1f; 就是在问他的协议格式&#xff1a;UDP&TCP 2.1.1三次握手 通信前&#xff0c;要先建立连接&#xff0c;确保双方都是在线&#xff0c;具有数据收发的能力。 2.1.2四次挥手 通信结束后&#xff0c;会有一个断开连接的过程&#xff0…

二十、像素流送,软件即游戏,SaaG时代到来

有了像素流送插件,就可以在远程计算机上运行虚幻引擎应用,并将其渲染效果和音频流送到任意平台的现代网页浏览器上。此外,还可以在浏览器上与流互动,遥控虚幻引擎应用。 1、启用像素流插件 虚幻编辑器的主菜单中选择 编辑(Edit) > 插件(Plugins),在图像(Graph…

selenium-web自动化测试

一、selenium环境部署 1.准备chrome浏览器&#xff08;其他浏览器也行&#xff09; 2.准备chrome驱动包 步骤一&#xff1a;查看自己的谷歌浏览器版本(浏览器版本和驱动版本一定要对应) 步骤二&#xff1a;下载对应的驱动包, 下载路径 : ChromeDriver - WebDriver for Chrom…

DragGAN:用崭新的方式进行图像处理

该项目的论文被SIGGRAPH 2023 收录&#xff0c;论文以 StyleGAN2 架构为基础&#xff0c;实现了 “Drag” 关键点就能轻松 P 图的效果。 https://github.com/XingangPan/DragGAN https://vcai.mpi-inf.mpg.de/projects/DragGAN/ 目录 原图1测试一测试二测试三 原图2测试一测试…

【数据结构与算法】基数排序

基数排序 基数排序&#xff08;Radix Sort&#xff09;属于“分配式排序”&#xff0c;又称“桶子法”或 bin sort&#xff0c;顾名思义&#xff0c;它是通过键值的各个位的值&#xff0c;将要排序的元素分配至某些“桶”中&#xff0c;达到排序的作用。基数排序法是属于稳定性…

【文献分享】比目前最先进的模型轻30%!高效多机器人SLAM蒸馏描述符!

论文题目&#xff1a;Descriptor Distillation for Efficient Multi-Robot SLAM 中文题目&#xff1a;高效多机器人SLAM蒸馏描述符 作者&#xff1a;Xiyue Guo, Junjie Hu, Hujun Bao and Guofeng Zhang 作者机构&#xff1a;浙江大学CAD&CG国家重点实验室 香港中文大学…

51单片机——串行口通信

目录 1、51单片机串口通信介绍 2、串行口相关寄存器 2.1 、串行口控制寄存器SCON和PCON 2.1.1 SCON&#xff1a;串行控制寄存器 (可位寻址) 2.1.2 PCON&#xff1a;电源控制寄存器&#xff08;不可位寻址&#xff09; 2.2、串行口数据缓冲寄存器SBUF 2.3、从机地址控制…

持续贡献开源力量,棱镜七彩加入openKylin

近日&#xff0c;棱镜七彩签署 openKylin 社区 CLA&#xff08;Contributor License Agreement 贡献者许可协议&#xff09;&#xff0c;正式加入openKylin 开源社区。 棱镜七彩成立于2016年&#xff0c;是一家专注于开源安全、软件供应链安全的创新型科技企业。自成立以来&…

如何有效地使用ChatGPT写小说讲故事?

​构思故事情节&#xff0c;虽有趣但耗时&#xff0c;容易陷入写作瓶颈。ChatGPT可提供灵感&#xff0c;帮你解决写作难题。要写出引人入胜的故事&#xff0c;关键在于抓住八个要素——主题、人物、视角、背景、情节、语气、冲突和解决办法。 直接给出故事模板&#xff0c;你可…

Selenium+Java环境搭建(测试系列6)

目录 前言&#xff1a; 1.浏览器 1.1下载Chrome浏览器 1.2查看Chrome浏览器版本 1.3下载Chrome浏览器的驱动 2.配置系统环境变量path 3.验证是否成功 4.出现的问题 结束语&#xff1a; 前言&#xff1a; 这节中小编给大家讲解一下有关于Selenium Java环境的搭建&…

C语言指针进阶-1

本篇文章带来 1. 字符指针 2. 数组指针 3. 指针数组的相关知识详细讲解&#xff01; 如果您觉得文章不错&#xff0c;期待你的一键三连哦&#xff0c;你的鼓励是我创作的动力之源&#xff0c;让我们一起加油&#xff0c;一起奔跑&#xff0c;让我们顶峰相见&#xff01;&#…

智慧农业:科技赋能农村发展

智慧农业发展前景灿烂多彩&#xff0c;正为农业带来新的转型升级。随着科技的不断发展&#xff0c;数字化、自动化和智能化技术逐渐渗透进农业领域&#xff0c;为农民提供了更多高效便捷的农业管理方式。智慧农业通过物联网、大数据、人工智能等先进技术&#xff0c;实现对农田…

前端小练-仿掘金导航栏

文章目录 前言项目结构导航实现创作中心移动小球消息提示 完整代码 前言 闲的&#xff0c;你信嘛&#xff0c;还得开发一个基本的门户社区网站&#xff0c;来给到Hlang,不然我怕说工作量不够。那么这个的话&#xff0c;其实也很好办&#xff0c;主要是这个门户网站的UI写起来麻…

【深度学习】以图搜索- 2021sota repVgg来抽取向量 + facebook的faiss的做特征检索, 从环境搭建到运行案例从0到1

文章目录 前言安装小试牛刀用repVgg抽取向量构建Faiss索引进行相似性搜索本项目延伸其它项目拓展总结 前言 Faiss的全称是Facebook AI Similarity Search。 这是一个开源库&#xff0c;针对高维空间中的海量数据&#xff0c;提供了高效且可靠的检索方法。 暴力检索耗时巨大&a…

【Lua学习笔记】Lua进阶——协程

文章目录 协程协程的定义和调度StatusRunning 协程 协程是一种并发操作&#xff0c;相比于线程&#xff0c;线程在执行时往往是并行的&#xff0c;并且线程在创建销毁执行时极其消耗资源&#xff0c;并且过长的执行时间会造成主进程阻塞。而协程可以以并发时轮值时间片来执行&…

《QDebug 2023年7月》

一、Qt Widgets 问题交流 1.QPainter旋转角度绘制线条的一点问题 QPainter 旋转角度&#xff0c;等距绘制若干线条&#xff0c;会出现绘制不均匀的情况&#xff1a; 但是在测试 QML Canvas 绘制时&#xff0c;发现效果是正常的&#xff0c;原来是因为 Canvas 默认的 capStyle…

uni-app点击按钮弹出提示框(以弹窗的形式显示),选择确定和取消

学习目标&#xff1a; 学习目标如下所示&#xff1a; uni-app点击提交按钮后弹出提示框&#xff0c;&#xff08;以弹窗的形式显示&#xff09;,提示用户是否确认提交&#xff08;即确定和取消&#xff09;&#xff0c;点击确定后调用真正的提交方法&#xff0c;将数据传给后端…

这三件事没理顺,你过不了软考

下午好&#xff0c;我的网工朋友 上周软考成绩出来了&#xff0c;大家都过了没&#xff1f; 我看好多人都说早上的题目稳过&#xff0c;下午的好多都挂了。 软考每年这个通过率&#xff0c;确实是一言难尽。 到底怎么样才能过&#xff0c;自学、培训&#xff0c;各种诀窍&am…