本文为霍格沃兹测试学院特邀顾问,资深测试开发技术专家蒋刚毅老师对接口自动化测试的实践总结。进阶学习文末加群。
5~10 年前,我们接触的自动化测试更关注的是 UI 层的自动化测试,Mercury 的 WinRunner/QTP
是那个时代商业性自动化测试产品的典型代表,在那个时代大家单纯想的都是能用一个自动化操作的工具替代人力的点击,商业化或是私有化框架大行其道。
而分层的自动化测试倡导产品的不同阶段(层次)都需要自动化测试。在《Google 软件测试之道》中,在 Google 70%
的投入为单元测试(小型测试),20% 为接口 / 集成测试(中型测试),10% 为 UI
层的自动化测试(大型测试),也就是大家熟悉的金字塔模型,越往上自动化实现难度越大,投入产生的收益也越低(需要强调的是,UI
层的自动化测试作为最接近用户操作的测试,仍然有其存在的意义和场景)。
接口测试是验证两个或多个模块应用之间的交互(通常是采用接口的方式),测试的重点是要检查数据的交换,传递和控制管理过程,还包括处理的次数。
接口测试的核心战略在于:以保证系统的正确和稳定为核心,以持续集成为手段,提高测试效率,提升用户体验,降低产品研发成本。
接口测试要为代码的编写保驾护航,增强开发人员和测试人员的自信,让隐含的 BUG 提前暴露出来,要让开发人员在第一时间修复
BUG,要让业务测试人员在测试的时候更加顺手,最大限度得减少底层 BUG
的出现数量,要让产品研发的流程更加敏捷,要缩短产品的研发周期,最后在产品上线以后,要让用户用得更加顺畅,要让用户感觉产品服务零缺陷。
不同于单元测试,接口测试本质上还是一种黑盒的测试,所以非常适合专职测试工程师去参与和覆盖。
《Google
软件测试之道》中早已有过预言,保密和私有化的基础测试设施并不能获得想象中的好处,这种方式意味着昂贵和迟缓,即使在公司内部的不同项目之间也很难做到复用。未来的测试基础设施必然是建立在共享代码和开源框架的基础上,测试开发人员需要更多的利用开源项目并为之贡献。最近重读了一次这本几乎改变软件测试行业的书籍,发现里面的预言都是如此准确,当然也可以认为国内整个行业都正参照
Google 的方式在进行演变。
这种方式在前几年实施的难度还是比较大,因为在市场上要找到懂 Java
代码的测试工程师都寥寥无几,但在对测试工程师开发能力要求越来越多的今天实施难度已没有想象中困难,Java/Python
等语言的编码能力也已成为我们团队招聘时的基本要求。
另外提下,这里使用 Java 而不用其他语言的原因,主要是团队的技术储备 Java 是强项 , 拥有丰富的开源测试库,而且一般互联网公司的产品基本都是采用
Java 框架进行开发,和开发团队技术栈保持一致非常有必要性。
有很多公司做了各种不同的接口框架,都是基于自己公司的业务基础设计开发。我们基于自己的业务特点也封装了自己的接口测试框架 gtest-
framework,在开发人员的单元测试中也正逐渐使用。
gtest-framework 要做的事情:
1. 数据准备
接口测试的数据准备,一般是指数据库的数据准备,有时候还包括文件和缓存的数据准备。具体实现可以从下面几个方面去考虑
(1)硬编码的方式准备测试数据,在写测试代码的时候,使用到什么数据就插入什么数据。为了避免数据重复,很多人会习惯于使用随机字符或随机数(这种方法可能造成测试用例不稳定,尽量避免)。
(2)可以直接通过调用其他 API
的方式准备测试数据,这种情况在测试最上层服务的时候比较有用,比如测试购买商品,就需要准备要购买的商品数据,购买商品的用户数据,这个时候,可以直接调用生成商品的
API 和生成用户的 API 直接生成测试数据。此方法实现简单,但前提是需要具备相应的 API 并且此 API 功能正确。
(3)使用 Excel 或 XML 准备测试数据,这种准备测试数据的方式,主要针对对象数据的准备,比如可以将一条商品数据对应 Excel
中的一条数据,因为一般开发都会使用 pojo 映射,而在准备测试数据的时候,这些 pojo 对象属性的设置往往是重复和大工作量的,用 Excel 或 XML
方式准备,则可以减少在代码当中重复去准备这些数据。
一般我们使用的是 2/3 两种方式,其中 3 这种方式主要利用 Dbunit、Spring-test、Unitils
等测试框架的特性经二次开发增加自定义注解,很轻松的导入 Excel 或 XML 格式的文件并在测试完成后对数据进行自动回滚。
/**
* @ClassName: TestJdbcDataSet
* * @Description: 采用自定义 TestDataSet 注解方式准备测试数据,推荐。
* * @author Cay.Jiang
* * @date 2017 年 7 月 10 日 上午 9:10:29
* *
* */
* public class TestJdbcDataSet extends BaseCase{
* Map args = new HashMap();
* @Test
* @TestDataSet(locations={"/tmp/domaininfo.xls"},dsNames={"mysqlDataSource"})
* public void test01_mysql(){
* args.put("selfdomain", "baidupc2");
* List
上面代码中的 /tmp/domaininfo.xls 参见:domaininfo.xls