我们知道在测试设计时,对于一些操作相似的场景,可以采用步骤同数据相分离的方法来描述。这样的用例内容精炼、逻辑清晰,也利于未来自动化测试脚本的复用。
数据驱动测试是一种流行的软件测试方法,用于归纳性、结构化和集中化地描述测试中有规律的输入、可验证的输出,以及环境等配置项。
好的测试数据,通常具有以下几个特征:
- 覆盖全面的业务操作场景
- 涵盖尽可能多的异常路径
- 避免等价类数据间的冗余
- 同时包括输入和输出数据
- 提炼系统、浏览器、设备等软硬件环境差异
- 取值特征明确,具有可操作性
我们在自动化测试中,通常会将数据保存在文本文件、Excel或数据库中。实际使用时,利用自动化测试框架的数据提供者特性,来封装数据调用。以下是几个主流测试工具采取的数据萃取方法。
功能自动化工具 - HP UFT (QTP) 使用了一个二维表格管理数据
性能/接口测试工具 - JMeter 使用XPath读取XML等结构化文件
单元测试工具 - TestNG 提供了DataProvider数据提供者机制
有关测试数据的管理,这里给大家介绍一个开源利器 - 禅道ZenData。他使用了YAML文件来定义测试数据,支持定义间的继承、覆盖和引用,具备语法简明、结构清晰、配置灵活和复用方便等优点。以下,我们用几个例子来说明其简单而丰富的语法特性。
支持区间(a-z)、步长(3)、随机(R)、重复({3})、循环(loop)、前后缀(prefix)
title: 测试
fields:
- field: test
range: a-z:3, 1-9:R, x-y{3}
loop: 3
loopfix: |
rand: true
prefix: "["
postfix: "]\t"
可格式化(format)、补白(leftpad)、嵌套(fields),平行和递归地迭代数据(mode)
title: 测试
fields:
- field: field1
mode: r
fields:
- field: field1.1
range: 1-9
format: "passwd%02d”
- field: field1.2
range: 1-99
length: 2
leftpad: 0
支持时间运算(-1M为一月前)、常用函数(md5)和值表达式(value)解析
title: 测试
fields:
- field: time
range: “(-1M)-(+1w):60”
type: timestamp
format: "YY/MM/DD hh:mm:ss”
- field: function
range: 1000-9999
format: md5
- field: number
value: 1-9
- field: expression
value: "$ number * 3 + 1000"
可从文件中读取(range)、Excel中查询(select)、其他YAML定义中引用(from)数据
title: 测试
fields:
- field: file
range: users.txt:R
- field: query
from: address.cn.v1.china
select: city
where: state like '%山东%'
limit: 3
- field: refer
from: ip.v1.yaml
use: privateC{3}
ZenData內置了一些常见的国家、地址、姓名、颜色、互联网”黑话“等基础数据,支持文本、JSON、XML、SQL、CSV、Excel、ProtoBuf和大段文章8种数据输出格式,还提供了一个Web界面以方便初次使用的人员。
测试人员也可以通过接口来使用测试数据,以下命令在8848端口启动了一个数据服务,并使用curl命令获取了100行demo/test.yaml配置文件所定义的数据。
./zd –p 8848
curl -i -X POST http://localhost:8848/data?lines=100&T=true&config=demo/test.yaml
为了更好地实现数据驱动的目标,我们可以封装ZenData数据服务接口成为一个DataProvider,在测试框架中直接使用。
以下是使用TestNG测试WordPress文章发布功能的示例。这里使用测试方法publishArticle反复提交文章,其引用了名为articleData的数据提供者来从ZenData服务获取数据。完整的代码可以访问Gitee源码库。
@Test(dataProvider="articleData")
public void publishArticle(Map<String, String> data) {
load("wp-admin/post-new.php");
waitTitle("撰写");
if (round == 0) {
clickIfExist(By.cssSelector("[aria-label='关闭对话框'"));
}
clickIfExist(By.cssSelector(".edit-post-post-status"));
String title = data.get("title") + "-" + TimeUtils.DataTimeStr();
titles.add(title);
inputIfExist(By.cssSelector("textarea.editor-post-title__input"), title);
clickIfExist(By.cssSelector(".block-editor-default-block-appender__content"));
inputIfExist(By.cssSelector(".wp-block-paragraph"), data.get("content"));
clickIfExist(By.xpath("//button[contains(text(), '发布')]"));
sleep(1);
clickIfExist(By.xpath("//button[text()='发布']"));
round++;
sleep(2);
}
@DataProvider(name="articleData")
public Iterator<Object[]> articleData() throws Exception{
String fileName="articles.csv";
return new CsvDataProvider(fileName);
}
有兴趣的朋友,可以从这里下载ZenData,参照用户手册了解更多的使用方法。