测试驿栈-由浅入深学性能 性能测试连载 (37)-性能测试数据错误率分析
性能答疑 QQ 群:697244251
概述
性能测试脚本跑完了之后,我们除了要收集瓶颈数据,还有分析错误数据。通常一套脚本跑完,错误类型不止一种,但是 jmeter 只会在聚合报告里面给出一个总体的错误率。
错误率
jmeter 里的错误率是如何统计的?
在返回的数据里面,只要success这一栏是 false 的,系统都认为是错误。但是我们在 jmeter 的响应数据里面看不到这一栏。只有保存到 csv 下才能看到
我们把 csv 下的success=false全部筛选出来,然后横向对比一下请求总数
false=8045,请求总数=106829。那么错误率=8045/106829=7.53%。跟聚合报告里面的错误率完全一致
错误率分类统计
在这些错误数据中,有好几种错误类型,我们根据响应信息把错误大致分为下面几类
1:Non HTTP response message: Connection timed out: connect 总数 645
2:Non HTTP response message: No buffer space available (maximum connections reached?): connect 总数 5369
3:Non HTTP response message: Software caused connection abort: recv failed 总数 1225
注意:Connection timed out: connect 指的是超过了 tomcat 最大超时时间,而不是我们预置的响应时间阈值。我们自身的阈值是下面这个
操作持续太长时间:他花费了 XXX 毫秒,但不应该超过 5,000 毫秒。 总数 1673
但是这些超过阈值的请求里面有一部分是正常响应的(829),还有一部分是异常响应