遇到的问题
今天来分享一个,在使用metersphere平台的过程中,遇到的问题。
先说一下我们在使用平台做自动化的时候,我们的要求:
要尽可能的保障用例执行的稳定,断言不能做的太简单。
比如,不能只断言返回状态码是200。至少得挑几个字段校验一下。
另外的话,如果测试环境经常会删数据之类的,那么接口里面的测试数据可能就会受到影响,要尽可能的保证用例的稳定正常的执行。
接下来来看今天在调试用例的时候,断言遇到的一个问题:
接口的返回结果是一个id的列表,格式如下:
针对上面的返回的数据,我的断言思路是:去数据库里面查找到满足要求的数据,然后也拼接一个这样的list出来。然后在平台的断言的位置再去进行断言。
然后我们发现,在平台上使用jsonpath进行断言的话,针对这种对比,可选用 等于、包含或者是正则去进行尝试,然后发现断言结果都是失败的:
不知道屏幕前细心的朋友,是否发现了到底是哪里不一致,导致了断言的失败。结果发现是接口返回结果在使用jsonpath获取到之后,列表里面每个元素之间是没有空格的,然后自己通过python脚本生成的一个列表,元素之间存在空格,所以才导致断言不通过。
解决措施
找到了问题所在之后,我这里采用的方式是:把列表转成一个字符串,保证打印出来的字符串跟使用jsonpath获取到的字符串格式是一致的即可:
quoteIds = '[{0}]'.format(','.join(map(str, quoteIds)))
从这里引申出来几个问题:
1、虽然平台化之后,可以简化测试人员的很多操作,但是,在一定程度上也会引入一些新的问题。比如通过jsonpath提取出来的数据,类型都变成了字符串返回,导致在断言的时候,自己需要做额外的格式转换等
2、类似上面的列表数据对比功能,可以尝试采用脚本断言的方式去解决。只是个人觉得有点繁琐而已。如果平台能够支持自定义断言的选项,自己封装一个断言的选项是比较方便的。
扫码关注腾讯云开发者
领取腾讯云代金券
Copyright © 2013 - 2025 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号:粤B2-20090059 深公网安备号 44030502008569
腾讯云计算(北京)有限责任公司 京ICP证150476号 | 京ICP备11018762号 | 京公网安备号11010802020287
Copyright © 2013 - 2025 Tencent Cloud.
All Rights Reserved. 腾讯云 版权所有