好的谢谢大佬耐心解答，我知道要怎么去了解了 :

就是不知道要学什么和用什么工具，以及得到数值之后，怎么去分析优化。
另外下面这个思路是对的嘛？现在我知道思路是设立一些维度比如从软件六大特性来验证用例是否全面，那就是 6 个维度来校验这个用例的质量。然后自己需要准备一些数据来对比 ai 生成的数据这些维度的准确度、召回率、F1-score。但是具体怎么做，中间的操作不太明白（是像你文中说到的利用 bert 来识别文字差异度一样吗？）。然后得到这些维度的结果之后，该怎么去分析，比如说准确度不高，那么要怎么给开发说要调整，还是说比如功能性的准确度不够，我就直接让开发调整功能性的准确度，有没有更确切 的描述。感谢大佬回复 。

看的很懵已经看了几遍了，比第一遍好了很多，感觉是很有干货的一篇文章。大佬，可以问个问题嘛？就是基本的思路是有，但是感觉还是一团乱麻，不知道到底怎么去验证，要学些什么东西，用什么工具，还是很懵。就是部门打算做一个 AI 识别原型并生成测试用例的项目，我需要来确认验收维度和确保效果，看完了之后还是不是很明白需要去做什么。我大概明白的一点是，文章中有的，我需要进行 NLP 测试原型的识别准确度，可以用文本相似度来对比识别的结果。（但是这一步感觉是会对用户是透明的）第二步，我需要验证输出的测试用例是否准确和覆盖全面，这个也是需要去测试混沌矩阵、以及准确率这些东西，就是测试数据这些是需要自己打标、然后对比。

感谢分享，写的很细，一下子解释清楚这些术语，让 ai 从一个遥不可及的东西变成了通俗易懂的分解产物。之前看网上各种各样的消息，悟了好久才理解一点点，看了这一篇后，有了稍微全面一点的认知。很有用。

大佬，我可以请教一个问题吗？关于 AI 测试业内有什么推荐的网站或资料吗，现在不知道从那里去着手。现在部门想做一个 ai 识别原型编写测试用例的工程，我和同事分工，同事说他来负责实现，我来负责检验 AI 效果。看了您的文字，我感觉我可能需要做一个 AI 评测报告，但是对于评测哪些内容，效果满意度没有一个全方位的了解，还有 AI 引擎测试也没看太懂。

入行一年，有些疑惑楼主很好解答了我，还有些没遇到的问题收藏了，以后遇到了看解决方案哈哈 不要删贴呀

不要用 removeall，是否第一次成功，后面的添加失败了，如果是这种情况，那是第一次操作后，请求头容器一起被清除了，改成删除指定元素，就可以了

大佬求手册

已明白啦 谢谢，很清晰

1. 请教一个问题，发布的 client 可以同时订阅自己发布的消息吗？
2. session present 部分，当 broker 如果没有 clientid 的会话信息时，sessionpresent 应当是为 false 嘛？

按照步骤来还是有问题

线程组 1

${setProperty(,auth_token,${auth_token})};
${setProperty(public_key,${public_key},)};
${__setProperty(user_id,${user_id},)}

线程组 2

String token = props.get("auth_token");
vars.put("auth_token",token);
log.info("token is "+token);

提交结果：

感觉是全局设置没成功，但是调试取样器是取到了值的，可以帮忙看看吗？

在线程组 2 中前置打印的值为空。