一个新的团队和新的项目,老板要求搞基于 AI 的自动化测试体系建设。
大佬们有啥经验吗
回答一下大佬们的疑惑:1. 搞不搞并不是小个卡拉米说了就算,boss 说啥就是啥,毕竟人家真给发工资。 2. 公司免费提供 token,DeepSeek V4pro 和 gpt5.5 都用过,后者效果似乎更好一点 3. 目前正在用 AI 生成测试用例,直接用 AI 生成的测试用例存在很多问题,需要自定义 SKILL 分步拆解进行规则约束,产出的用例可用性七八成的样子。上下文很容易就变大,这时产出的用例也容易出现幻觉,所有需要频繁压缩上下文。当然很多问题都是我太菜导致,所有希望能寻求到一些有真实落地经验的大佬指点几句
用 skill 自动写脚本自动 run 只要有 tokens 你还玩啥自动化。。。。
项目稳定了吗就自动化,token 多当我没说
研发中心 CTO 说搞接口自动化、UI 自动化没含金量,上限太低,买 tokens 就可以完成,多用 AI 保证线上质量、测试效率。
所以怎么弄的?我们现在也是这样,新项目,还在修改期,就让用 ai 提效,好抓马,好头疼
同样被要求了,走一步算一步吧
新项目更新迭代这么快自动化作用在哪里
初创团队不要弄自动化
这不难,只要 token 预算给我,不是难事
有足够的预算就能搞
回答一下大佬们的疑惑:1. 搞不搞并不是小个卡拉米说了就算,boss 说啥就是啥,毕竟人家真给发工资。 2. 公司免费提供 token,DeepSeek V4pro 和 gpt5.5 都用过,后者效果似乎更好一点 3. 目前正在用 AI 生成测试用例,直接用 AI 生成的测试用例存在很多问题,需要自定义 SKILL 分步拆解进行规则约束,产出的用例可用性七八成的样子。上下文很容易就变大,这时产出的用例也容易出现幻觉,所有需要频繁压缩上下文。当然很多问题都是我太菜导致,所有希望能寻求到一些有真实落地经验的大佬指点几句
确实抓马,但只要 token 不需要自己掏钱就问题不大,gpt 的 token 真太贵。我最近在用 AI 生成测试用例,效果还勉强可以,确实能节约很多时间。希望可以交流一下类似的情况
wiki 搭建个人知识库,全量索引不会有幻觉问题,大模型清洗需求文档,跟产品研发补全需求,搭配 LLM+ 提示词限制拆解需求文档生成测试用例,基本用例能达到九成可复用,其次 wiki+work buddy 或者 tare 可以做到自动迭代知识库和差异化记录,应该会更好一些