各位大佬,大家在 AI 自动生成准确和详尽的测试用例方面,提示词是怎样写的?有没有成功的经验,可以分享一下吗?
看到网上写的一句话提示词,生成用例不太理想
各位有什么生成用例的提示词吗?
自动生成用例没啥难的,好的基座模型 + 质量高的需求文档 + 质量还行的源码 + 业务知识库 + 历史测试用例 + 测试用例设计规范提示词即可。
AI 发展到现在还在纠结提示词,要将自己工作沉淀为 skill。你平时是怎么写用例的,从哪些方面考虑,使用了什么用例设计场景,你直接写入 skill 不就行了。当然这个 skill 不是一蹴而就,你都说了发现生成的用例不是那么的理想,那你心目中最理想的用例是什么,慢慢的去打磨 skill. AI 发展到现在还在单纯的使用提示词已经落伍了,你甚至可以自己写一个你认为优秀的用例示例,贴在 skill 中,准确度会大大的提高
我们这边设计的 skill 工作流,从需求文档解析、开发设计文档分析、知识库召回、回归用例召回、测试用例设计方法等等一整个流程来实现最终的测试用例输出,产出的测试用例采纳度还可以
一句话提示词只能用来自己玩,如果想提高准确度,需要一个详尽的测试用例生成 SKILL
其实我的目的不是生成测试用例,生成测试用例是为了做 UI 自动化测试,目前我们生成的用例始终无法做到非常详尽,必须要人工修改才可以,我们需要的用例的操作步骤要非常精准,AI 能做 UI 自动化测试的准确率才会比较大,所以需要测试步骤必须写的非常详尽和准确。我知道有些人 AI 生成的测试用例确实能用,人是可以看得懂的进行测试的, 但是 AI 不行,我们实验的结果是龙虾对于不详尽和准确的操作步骤的用例,会产生 AI 幻想,测试准确率不高。大神,在做通过用例 UI 自动化方面有哪些见解没?要求自然语言 UI 自动化的准确率能达到 95% 以上
codex ChatGPT5.6 启动,帮我生成一个覆盖功能测试用例较为全面的 skills,要包含生成,审核,标记标准 sop,然后帮我优化一下这个 skills 还有没有改进空间。
xxx 为什么没有生成,帮我看一下为什么然后优化到 skills 中。
一直重复就行
如果是需求文档转 UI 自动化用例,目前我们是 3 步策略
1.需求文档拆解生成测试用例,规定好测试目标 - 步骤路径(父子结构的知识库文档)- 测试步骤 + 预期结果(预期结果一定要准确)
2.禅道 bug 转用例,需要禅道提交 skill,提交过程中结合需求文档和知识库,自动转换为 UI 自动化所需格式,提交 bug 的时候就规定好模版
3.人工测试过程中遍历测试用例,修改不合规、不完整和错误不明确的预期结果
4.整合所有结果,尝试转换 UI 自动化用例