测试基础 文心一言和 chatGPT 在测试用例设计上的差距

JoyMao · 2023年05月05日 · 最后由 西学东渐 回复于 2023年05月12日 · 7113 次阅读

同样的提示语(很简洁的需求):

请根据需求按表格给出测试用例表格最后一列是期望结果其余列是各个条件需求如下
颜色为红色Size为大则为美国
颜色为绿色Size为小则为日本
其他情况为法国

文心一言:

chatGPT

比较结果显而易见。

文心一言作为中文为基础的百度出品,目前对这种简练性需求的理解能力比 chatGPT 还是差了不止一点半点啊。
而且生成的用例表格完全不是期望的结果(可以认为是 BUG 了),另外推理能力也 “一言” 难尽......

共收到 1 条回复 时间 点赞

文心一言唯一好点的可能就是文章写的还行,还能比较一下 chatgpt,其他真的一言难尽

需要 登录 后方可回复, 如果你还没有账号请点击这里 注册