AI测试 求助,现在有什么 AI 相关的比较实用测试工具吗?

冻柠乐 · 2024年03月13日 · 最后由 龙测科技 回复于 2024年03月18日 · 5620 次阅读

前言:
公司之前有个 SB 架构师(今年已经被辞退了),说要 AI 应用在研发测试,还说要训练模型(我觉得把我们公司卖了,都训练不出来)

正题:
1、现在分管领导就也要求我们测试部门的自动化要结合 AI 提升效能,还说别的公司已经可以很成熟的用 AI 做测试(听到都翻白眼了)
2、领导也要求我们研究一下市面上有哪些 AI 相关的测试工具可以集成?

共收到 23 条回复 时间 点赞

AI 先给研发提效吧。测试这边还是比较难的。

歪个楼,AI 应用在测试工具能做什么?自动生成测试用例?

不知道用 GPT 解决日常工作的疑问算不算提效,我是觉得至少比百度查快一点

如果你们做出来了,可以直接拉投资自己开家公司了,直接升级为老板

Lilian 回复

如果真能根据需求文档生成精确无误的用例,那产品和测试这两个岗位就要合成一个了

AI 辅助编写测试脚本还是可以的,市面上已经有好多免费好用的工具,直接安装插件就可以了,至少这个是看得见摸得着的,其他就是扯蛋,至少目前是

现在新版本的 pycharm 都已经默认安装了这种插件

测试新人 回复

有这能力,真的都不用做测试了。。自己当老板

沫沫sir 回复

其实至少在我们公司的行业,AI 感觉帮助不大。。行业比较小众的,一些业务知识也没有相关 AI 会训练

Lilian 回复

我看了一下 LLM,比如 CHATGPT 这些,都只是生成一些比较通用的用例,实际帮助不是很大的。
看了 MTSC2023 深圳站的哪些大厂的成果,基本也都是自研或者自己训练大模型的,我们公司没能力也没钱搞~

恒温 回复

欸,领导拿这个来刷 KPI 呢。分管领导是我们测试部的直属领导,使唤不动开发,就使唤我们测试。。

测试新人 回复

深表赞同,当下最火的就是 AIGC,最扯的应用就是自动生成用例或者脚本,能做出来的也是极其简单的转换,稍复杂的需求文档,AI 就成人工智障了,奈何公司老板都爱这些虚的表面。人家 chatgpt 要是能精准生成用例,他为什么不直接提供这种有偿服务?当然不排除以后出现更强大的 AI 可以实现,但当前不现实

要先分析工种,测试这个工种的工作内容,有很大一部分是主观工作,涉及个人喜好,情感等。这种很难用 AI 代替。

简单粗暴的回答一下你:

  1. 架构师都没推动的事情,靠测试推你觉得靠谱么?
  2. 根本是提效,不是 AI。只是给你个思路,你要能吹出花来,也可以适当不提效。同理,你要有提效的办法,够狠,也可以不用 AI。
magicyang 回复

我根本就不想做啊,分管领导逼着我们测试部老大,然后老大也头疼,就又分发给我们几个搞自动化的测试。。
让我们写写自动化代码还行,搞 AI 完全就是扯淡了。
我们普通员工也不想搞提效啊,提效就是给自己找不痛快~
现在是每个星期都要问一下进度,好烦恼~

恒温 回复

领导已经不听劝了,反正就是要跟 AI 沾边~
之前已经跟他分析过可能会竹篮打水一场空,就放弃了一些不实际的想法了
现在是又想我们研究 AI 相关的工具,能不能集成到我们现在有测试平台里

直接生成用例不太科学,需求到用例中间有好多层呢,至少得拆分下吧。

大家各自公司内部,测试在 AI 方面的投入方向和现阶段的产出是怎么样的?

冻柠乐 回复

你们的数据不敏感是可以做的,可以接 gpt4,自动生成用例也可以做到,你到时候从自动生成的用例中选择正确的就可以了。

把填空题变成选择题。

冻柠乐 回复

再直白一点:

  1. 自动化上面觉得产出低,要出亮点。
  2. 你们不算测试 LEADER 嫡系,压力直接传递。 尽人事听天命吧,做成啥样算啥样,对的起自己就行。 实在不行,就掀桌子跑路好了。

直接生成用例效果会不好,但是帮你检查用例效果可以很好

楼主有答案了提点一下我,刚领导丢给我一份《测试用例自动生成.pdf》给我让我关注调研下,打开里面几张截图糊的根本看不清也放大不了,反正今年必须有个像样的东西落地了,汗流浃背 ing

AI 生成用例最大的问题是准确性, 要么逐步拆解人工微调得出用例,要么上 RAG 训练自己专有大模型? 大家各公司内部的落地效果怎么样?

以目前 AI 的能力,离实现用例的自动生成还有相当长的距离,楼上的大佬们也谈到了 LLM、GPT 等,建议相当中肯。
我们公司在 AI 上也有些探索,但目前对 AI 的利用,主要还是借助 AI 识别能力,提升定位准确性;以及一些 AI 模型去提高用例的稳定性、健壮性。

需要 登录 后方可回复, 如果你还没有账号请点击这里 注册