自动化工具 小猿搜题、作业帮这类应用的准确率测试

WD · 2020年11月11日 · 最后由 陈恒捷 回复于 2020年11月12日 · 2846 次阅读

如题,这类搜题目的应用搜出来题目的准确率怎么验证的?一次测很多题目的话,人工去点么😂

共收到 7 条回复 时间 点赞
WD #1 · 2020年11月11日 Author

有没有老哥来扫下盲

WD #2 · 2020年11月11日 Author

感觉这种类似的应用自动化测不太好做呐,每次要是人工去一道道题目去看感觉效率又很低

没明白你说的准确率,具体是指什么准确率?

陈恒捷 回复

应该是指,这道题的解题是不是准确的,每道题到能搜出来答案,但是答案的准确怎么保证

大概是不测。

这个很简单啊,跟我公司现在的业务一样;
自动化获取题目的内容,看看数据库的答案或者从接口获取答案,跟录入的答案是否一样;如果你录入都有问题,那种专业性很强的问题的,基本上无解!如果是爬取别人的资源的话,可以通过手段去获取竞品的题目与答案

rhyme 回复

个人想到的:和正确性更高的进行对比优化。

比如选 100 道题,提前录入标准答案,然后每次调整这方面的功能后,都用程序对比搜出来的答案里是否有这个标准答案,权重是否比较高
或者楼上说的,和竞品对比(假设竞品正确率比你高)

还有一种方法,看用户的行为反馈。对于明显不正确的答案用户是不感兴趣的,压根不会点击查看。可以看下对于搜索结果,用户大多点击的是前几名的,还是会去点击几十名开外的。

需要 登录 后方可回复, 如果你还没有账号请点击这里 注册