大家常说 UI 自动化不稳定,那又如何提高稳定性呢?
UI 自动化测试稳定性,最常见的就是同一套测试用例在同样的环境上,时而测试通过,时而测试不通过。这样的测试结果产生了很多无效的缺陷,特别是自动化测试已经与公司内部平台接入了相应缺陷系统,使用对于开发、产品以及 QA 常常说自动化测试做了很多无用功。
要提高 UI 测试稳定性,首先我们需要知道到底是什么原因引起的。尽可能的找出那些引起不稳定因素,然后找到相关不稳定因素对应的解决措施。
根据目前公司的项目实践经验以及遇到的场景,总结了以下几种原因:
操作界面非预期的弹框、广告、浮层
系统层面、第三方软件一些意外弹框,例如第三方软件的广告、系统权限提示、系统更新提示
测试软件本身弹框,例如详情页根据用户画像,自动推送一些广告弹框,这种一般很难知道在什么时候会出现,导致测试用例执行不成功
页面元素发生了变化
开发修改了元素名称 (公司将前端改写成了 vue)
终极解决方案:
测试数据原因
页面控件点击失效或者未加载出来
测试系统的 A/B 策略
由于公司运营活动,每次选择不同的城市进行,导致同一个城市不同时间看见页面不一样,效果也不一样
- 解决方案
- 测试用例编写兼容处理,根据不同时期,拿到活动标识,调用不同逻辑进行处理
总结:
以上为内容纯属个人理解,如有不足,欢迎各位大神指正,转载请注明出处!