Postman+Newman+Jenkins实现REST自动回归测试

简介

本文主要介绍如何使用Postman+Newman+Jenkins，实现微服务自动化的回归测试。

所需工具

• Postman：用于编写测试用例，导出.json格式的测试脚本
• Newman：命令行方式执行postman导出的测试脚本
• Jenkins：实现测试的自动化

Postman的下载

官网：
https://www.getpostman.com/

Newman的安装

Newman可以运行Postman生成的.json测试用例，生成.html格式的测试报告。

可以直接使用npm进行安装：

npm install newman --global;

更多文档，可以参考GitHub：
https://github.com/postmanlabs/newman

测试过程

1. 使用Postman编写微服务接口的测试用例，并导出json文件。
2. Jenkins创建测试项目，使用newman来执行测试脚本，生成测试报告。
3. 将测试项目与工程构建项目关联，使之在构建发布到测试环境后触发执行。

使用Postman编写测试用例

1. 根据swagger服务契约，使用Postman工具，传入测试参数并模拟调用。

2. 调用后，可以点击左侧的文件夹图标，新建一个Collection。
   

3. 点击右侧的Save按钮，将本次测试脚本保存到刚才创建的Collection中。
   

4. 继续进行其它API的调用，并保存至Collection中。
   

5. 点击Collection上的省略号图标，并选择Export，将测试用例导出保存为.json文件。

6. 上传到服务器相应目录下。

配置Jenkins测试项目

接下来配置Jenkins，用于触发调用newman进行测试。

1. 创建一个自由风格的Jenkins项目
2. 在构建一栏，输入以下脚本，用于触发newman测试
   

   newman run /home/deployer/functest/foobar/foobar.json --reporters cli,html,json,junit --reporter-html-export /home/deployer/functest_report/foobar/foobar_report.html

3. 可以在主项目的构建配置中，增加构建后操作，构建完成后自动触发执行这个测试项目
   

查看测试结果

1. 可以在Jenkins的日志中直接查看结果
2. 也可以用Web容器将生成的.html测试报告暴露出来，直接通过浏览器访问

自动化回归测试的必要性

Postman、Selenium这样的动化的回归测试真的有必要吗，它能够帮助我们发现多少问题，为了实现它我们要多付出多大的代价？
说到底，这是一个有关”性价比”的问题。

首先从组织结构上来看，如果项目的规模大到了有专门的测试团队，那么无疑会大大降低测试团队的工作量。
但如果是开发人员兼职做测试，那么多花点心思在controller层的集成测试上，可以会用更少的时间，达到差不多的效果。

有时间会再写一下关于实践中单元测试、集成测试的一些取舍，以及手工回归测试与swagger参数示例等方面的内容。