360Qtest团队 Linux 性能监控命令——sar 详解

阿克萌德 · 2016年08月08日 · 最后由 易寒 回复于 2016年08月08日 · 1490 次阅读

sar 命令可以从文件的读写情况、系统调用的使用情况、磁盘 I/O、CPU 效率、内存使用状况、进程活动及 IPC 有关的活动等方面进行报告。

命令格式:sar [options] [-A] [-o file] t [n]
t 为采样间隔,n 为采样次数,默认值是 1
-o file 表示将命令结果以二进制格式存放在文件中,file 是文件名。
options 为命令行选项

sar 命令常用选项如下:

-A:所有报告的总和
-u:输出 CPU 使用情况的统计信息
-v:输出 inode、文件和其他内核表的统计信息
-d:输出每一个块设备的活动信息
-r:输出内存和交换空间的统计信息
-b:显示 I/O 和传送速率的统计信息
-a:文件读写情况
-c:输出进程统计信息,每秒创建的进程数
-R:输出内存页面的统计信息
-y:终端设备活动情况
-w:输出系统交换活动信息
CPU 资源监控:
每 5s 采样一次,连续采样 10 次,观察 cpu 使用情况,并将采样结果以二进制形式存入 test_sar 中(查看二进制文件 test 中的内容,sar 命令:sar -u -f test_sar)

sar -u -o test_sar 5 10

输出项说明:

CPU:all 表示统计信息为所有 CPU 的平均值。

%user:显示在用户级别 (application) 运行使用 CPU 总时间的百分比。

%nice:显示在用户级别,用于 nice 操作,所占用 CPU 总时间的百分比。

%system:在核心级别 (kernel) 运行所使用 CPU 总时间的百分比。

%iowait:显示用于等待 I/O 操作占用 CPU 总时间的百分比。

%steal:管理程序 (hypervisor) 为另一个虚拟进程提供服务而等待虚拟 CPU 的百分比。

%idle:显示 CPU 空闲时间占用 CPU 总时间的百分比。

P.S:

1.若 %iowait 的值过高,表示硬盘存在 I/O 瓶颈

2.若 %idle 的值高但系统响应慢时,有可能是 CPU 等待分配内存,此时应加大内存容量

3.若 %idle 的值持续低于 1,则系统的 CPU 处理能力相对较低,表明系统中最需要解决的资源是 CPU。

inode、文件和其他内核表监控:
每 5 秒采样一次,连续采样 10 次,观察核心表的状态
sar -v 5 10

输出项说明:

dentunusd:目录高速缓存中未被使用的条目数量

file-nr:文件句柄(filehandle)的使用数量

inode-nr:索引节点句柄(inodehandle)的使用数量

pty-nr:使用的 pty 数量

内存和交换空间监控:
每 5s 采样一次,连续采样 10 次,监控内存分页

Sar –r 5 10

输出项说明:

kbmemfree:这个值和 free 命令中的 free 值基本一致,所以它不包括 buffer 和 cache 的空间.

kbmemused:这个值和 free 命令中的 used 值基本一致,所以它包括 buffer 和 cache 的空间.

%memused:这个值是 kbmemused 和内存总量 (不包括 swap) 的一个百分比.

kbbuffers 和 kbcached:这两个值就是 free 命令中的 buffer 和 cache.

kbcommit:保证当前系统所需要的内存,即为了确保不溢出而需要的内存 (RAM+swap).

%commit:这个值是 kbcommit 与内存总量 (包括 swap) 的一个百分比.

内存分页监控:
每 5s 采样一次,连续采样 10 次,监控内存分页

输出项说明:

pgpgin/s:表示每秒从磁盘或 SWAP 置换到内存的字节数 (KB)

pgpgout/s:表示每秒从内存置换到磁盘或 SWAP 的字节数 (KB)

fault/s:每秒钟系统产生的缺页数,即主缺页与次缺页之和 (major +minor)

majflt/s:每秒钟产生的主缺页数.

pgfree/s:每秒被放入空闲队列中的页个数

pgscank/s:每秒被 kswapd 扫描的页个数

pgscand/s:每秒直接被扫描的页个数

pgsteal/s:每秒钟从 cache 中被清除来满足内存需要的页个数

%vmeff:每秒清除的页 (pgsteal) 占总扫描页 (pgscank+pgscand) 的百分比

I/O 和传送速率监控:
每 5s 采样一次,连续采样 10 次,报告缓冲区的使用情况

sar -b 5 10

输出项说明:

tps:每秒钟物理设备的 I/O 传输总量

rtps:每秒钟从物理设备读入的数据总量

wtps:每秒钟向物理设备写入的数据总量

bread/s:每秒钟从物理设备读入的数据量,单位为块/s

bwrtn/s:每秒钟向物理设备写入的数据量,单位为块/s

进程队列长度和平均负载状态监控:
每 5s 采样一次,连续采样 10 次,监控进程队列长度和平均负载状态

sar -q 5 10

输出项说明:

runq-sz:运行队列的长度(等待运行的进程数)

plist-sz:进程列表中进程(processes)和线程(threads)的数量

ldavg-1:最后 1 分钟的系统平均负载(Systemload average)

ldavg-5:过去 5 分钟的系统平均负载

ldavg-15:过去 15 分钟的系统平均负载

系统交换活动信息监控:
每 5s 采样一次,连续采样 10 次,监控系统交换活动信息

sar -W 5 10

输出项说明:

pswpin/s:每秒系统换入的交换页面(swap page)数量

pswpout/s:每秒系统换出的交换页面(swap page)数量

设备使用情况监控:
每 5s 采样一次,连续采样 10 次,报告设备使用情况

sar -d 5 10 -p

参数-p 可以打印出 sda,hdc 等磁盘设备名称,如果不用参数-p,设备节点则有可能是 dev8-0,dev22-0

tps:每秒从物理磁盘 I/O 的次数.多个逻辑请求会被合并为一个 I/O 磁盘请求,一次传输的大小是不确定的.

rd_sec/s:每秒读扇区的次数.

wr_sec/s:每秒写扇区的次数.

avgrq-sz:平均每次设备 I/O 操作的数据大小 (扇区).

avgqu-sz:磁盘请求队列的平均长度.

await:从请求磁盘操作到系统完成处理,每次请求的平均消耗时间,包括请求队列等待时间,单位是毫秒 (1 秒=1000 毫秒).

svctm:系统处理每次请求的平均时间,不包括在请求队列中消耗的时间.

%util:I/O 请求占 CPU 的百分比,比率越大,说明越饱和.

  1. avgqu-sz 的值较低时,设备的利用率较高。

2.当%util 的值接近 1% 时,表示设备带宽已经占满

要判断系统瓶颈问题,有时需几个 sar 命令选项结合起来

怀疑 CPU 存在瓶颈,可用 sar -u 和 sar -q 等来查看

怀疑内存存在瓶颈,可用 sar -B、sar -r 和 sar -W 等来查看

怀疑 I/O 存在瓶颈,可用 sar -b、sar -u 和 sar -d 等来查看

本文首发自 360Qtest 公众号,原作者:刘博洋,已获得第三方原创授权

共收到 1 条回复 时间 点赞

格式用 markdown

需要 登录 后方可回复, 如果你还没有账号请点击这里 注册