随着推动的 UI 自动化测试的逐步落地，想找同行多请教和沟通，所以今天做一个关于 UI 自动化相关指标的小调研，烦请大家多多帮忙。
调研标题：UI 自动化指标调研
小小的要求：以成功加入日常生产、并稳定运行 的 UI 自动化为准
调研内容格式：
0、UI 自动化框架
1、公司或产品名
2、UI 自动化的用例覆盖率
3、UI 自动化用例数
4、最近一个月的平均稳定性
5、目标稳定性
简单的事情，真正做好不容易，希望大家多多支持
邀请 @Lihuazhang @ycwdaaaa @simple @codeskyblue @williamfzc-github @diao2007 @026
我先来。
0、UI 自动化框架：Airtest/Poco
1、产品名：海外 cleanmaster
2、UI 自动化的用例覆盖率：82%
3、UI 自动化用例数：232
4、最近一个月的平均稳定性：83%
5、目标稳定性：95%
1、产品名：移动广告 SDK
2、UI 自动化的用例覆盖率：通过 UI 触发各种广告打点，占用例不足 10%
3、UI 自动化用例数：96 条（触发广告打点的 case，目前还在加）
4、最近一个月的平均稳定性：100%，运行时长 1.5h
5、目标稳定性：不稳定的不是 case，是逻辑变更导致的 case 重写
026
回复
目前执行一遍 Full Test，一台手机 3 小时左右，后期会同时 2～3 台手机运行，时间会少很多。
我们做了用例分层，进行了一定程度的细分，232 条用例其实还好，第四范式飞哥他们上千条用例了。
目前发现基于 Airtest 的用例执行效率上有一定的不足，这块后期会更新。
因为保密性，具体产品可能不便透露哈
1、产品名：**
2、UI 自动化的用例覆盖率：一方面是 UI 本身的校验，另一方面是利用 UI 驱动去触达一些场景
3、UI 自动化用例数：很大部分是动态生成的，动态生成的这一部分相对稳定一些（可能因为逻辑简单），静态的不够稳定
4、最近一个月的平均稳定性：因为太多了，且散落在不同层级，并不好给一个数值。不过主要失败的原因更多是在设备问题与环境问题上，例如断连、走到异常场景等等。用例本身失败大多因为业务逻辑变更。
5、目标稳定性：近期还在尽量增加容错以避免环境相关的影响
建议楼主建一个 UI 自动化的讨论群，
目前 UI 自动化确实不是很普遍落地，针对困境大家多讨论讨论
多谢支持，方便说一下用的 UI 自动化框架吗？
0、UI 自动化框架：Airtest/Poco
1、产品名：手游
2、UI 自动化的用例覆盖率：这个很难出来精准数值，大概覆盖了 80% 左右的功能，每个功能深度大概 60-70% 左右，还在持续堆 case
3、UI 自动化用例数：1000+ （case 最小颗粒度/互相独立，一般四台机器一起跑，耗时 50min 上下出报告）
4、最近一个月的平均稳定性：一般在 95% 以上（有定制失败重跑 稳定性能到 98% 上下）PS：这里的稳定性是指版本需求变动或版本 BUG 外的 case 未通过数/总 case 数。
5、目标稳定性：感觉保持现状就不错
最近正在用自己造的轮子，写用例，写的慢，总共 5 条，一天基本两条，但写完就可以不管了，依赖少，跑起来基本 100%，除非 ui 有异常
方便留个公司名吗？你们做的很厉害
现在的 ui 自动化好像并没有哪个公司的覆盖率很高，UI 还是处于发展和探索阶段
0、UI 自动化框架：Cypress
1、产品名：web + H5 应用
2、UI 自动化的用例覆盖率：70%
3、UI 自动化用例数：84
4、最近一个月的平均稳定性：85%
5、目标稳定性：95%
谢谢大家的支持
最近也加了不少测开群，但是呢要么是卖课的很烦，要么积极性不高，提出问题又没人讨论，太安静了。大佬，能不能建个群专门用来讨论测试开技术
0、UI 自动化框架：Airtest
1、产品名：web + 小程序（电商零售）
2、UI 自动化的用例覆盖率：核心模块差不多 80%
3、UI 自动化用例数：580+（web+ 小程序串联 case 流程比较长，四台机器单台在 3 个小时以上）
4、最近一个月的平均稳定性：营销交易模块流程长的在 80% 左右（流程长用例执行时长，外部因素失败多一些，单条失败会重跑），商品、会员这些基本 100%
5、目标稳定性：95%
有很多搜索解决不了的，我直接改了源代码
大佬们用例 case 怎么划分的
明显 Airtest 占比颇高啊
1、产品名：xx 大数据检索（bs）（pytest/selenium）
2、UI 自动化的用例覆盖率：其实就是很简单的搜索遍历，确定搜索结果是否正确
3、UI 自动化用例数：2w
4、最近一个月的平均稳定性：有些模块稳定，有些不稳定，视开发情况而定，75%-90% 之间吧，现在还没有稳定的基线数据，导致一些内容查询结果为空，是主要用例失败的点。
5、目标稳定性：95% 稳定吧，后期可能考虑到对验证方法要升级，感觉路漫漫，哎。