自动化工具 初创小团队应该如何建立自动化测试体系

xi · 2026年06月25日 · 最后由 xi 回复于 2026年07月15日 · 5595 次阅读

一个新的团队和新的项目,老板要求搞基于 AI 的自动化测试体系建设。

大佬们有啥经验吗

最佳回复
xi #1 · 2026年07月12日 Author

回答一下大佬们的疑惑:1. 搞不搞并不是小个卡拉米说了就算,boss 说啥就是啥,毕竟人家真给发工资。 2. 公司免费提供 token,DeepSeek V4pro 和 gpt5.5 都用过,后者效果似乎更好一点 3. 目前正在用 AI 生成测试用例,直接用 AI 生成的测试用例存在很多问题,需要自定义 SKILL 分步拆解进行规则约束,产出的用例可用性七八成的样子。上下文很容易就变大,这时产出的用例也容易出现幻觉,所有需要频繁压缩上下文。当然很多问题都是我太菜导致,所有希望能寻求到一些有真实落地经验的大佬指点几句

共收到 15 条回复 时间 点赞

用 skill 自动写脚本自动 run😂 只要有 tokens 你还玩啥自动化。。。。

项目稳定了吗就自动化,token 多当我没说

研发中心 CTO 说搞接口自动化、UI 自动化没含金量,上限太低,买 tokens 就可以完成,多用 AI 保证线上质量、测试效率。

所以怎么弄的?我们现在也是这样,新项目,还在修改期,就让用 ai 提效,好抓马,好头疼

同样被要求了,走一步算一步吧

新项目更新迭代这么快自动化作用在哪里

初创团队不要弄自动化

这不难,只要 token 预算给我,不是难事

有足够的预算就能搞

xi #1 · 2026年07月12日 Author

回答一下大佬们的疑惑:1. 搞不搞并不是小个卡拉米说了就算,boss 说啥就是啥,毕竟人家真给发工资。 2. 公司免费提供 token,DeepSeek V4pro 和 gpt5.5 都用过,后者效果似乎更好一点 3. 目前正在用 AI 生成测试用例,直接用 AI 生成的测试用例存在很多问题,需要自定义 SKILL 分步拆解进行规则约束,产出的用例可用性七八成的样子。上下文很容易就变大,这时产出的用例也容易出现幻觉,所有需要频繁压缩上下文。当然很多问题都是我太菜导致,所有希望能寻求到一些有真实落地经验的大佬指点几句

xi #11 · 2026年07月12日 Author
肖布布 回复

确实抓马,但只要 token 不需要自己掏钱就问题不大,gpt 的 token 真太贵。我最近在用 AI 生成测试用例,效果还勉强可以,确实能节约很多时间。希望可以交流一下类似的情况

xi #12 · 2026年07月12日 Author
codeskyblue 回复

现在有什么思路吗?

xi 回复

可以尝试 hermes 做测试执行,前期 skill、memory 生成的够多,效果还是不错的

xi 回复

wiki 搭建个人知识库,全量索引不会有幻觉问题,大模型清洗需求文档,跟产品研发补全需求,搭配 LLM+ 提示词限制拆解需求文档生成测试用例,基本用例能达到九成可复用,其次 wiki+work buddy 或者 tare 可以做到自动迭代知识库和差异化记录,应该会更好一些

xi #15 · 2026年07月15日 Author
还不如个AI 回复

好的,我去试试,谢谢

需要 登录 后方可回复, 如果你还没有账号请点击这里 注册