一、linux io分析(结合共享交换平台,重点关注标黄的地方即可)
1.1top命令
[root@localhost zqc]# top
top - 15:33:41 up 9 days, 5:30,
5 users, load average: 0.86,
0.84, 0.91
Tasks: 115 total, 1 running, 114 sleeping, 0 stopped,
0 zombie
%Cpu(s): 14.2 us, 2.6 sy,
0.0 ni, 80.4 id, 2.5 wa, 0.0 hi,
0.4 si, 0.0 st
KiB Mem :
7752548 total, 124168 free, 1124852 used,
6503528 buff/cache
KiB Swap:
7996412 total, 7423172 free, 573240 used.
6292212 avail Mem
PID
USER PR NI VIRT
RES SHR S %CPU %MEM
TIME+ COMMAND
16757 root 20
0 4651360 353508 7372 S 10.0
4.6 184:43.96 java
3
root 20 0
0 0 0
S 5.0
0.0 0:10.72 ksoftirqd/0
1
root 20 0
128148 4324 2704 S
0.0 0.1 0:12.57 systemd
2
root 20 0
0 0 0 S 0.0
0.0 0:00.17 kthreadd
7
root rt 0
0 0 0 S
0.0 0.0 0:00.48 migration/0
8
root 20 0
0 0 0 S
0.0 0.0 0:00.00 rcu_bh
9
root 20 0
0 0 0 S
0.0 0.0 1:20.65 rcu_sched
top命令通过查看CPU的wa%值来判断当前磁盘IO性能,如果这个数值过大,很可能是磁盘IO太高了,当然也可能是其他原因,例如网络IO过高等。
2.iostat命令
安装工具:
yum install -y sysstat
基本使用:
iostat -d -k 1 10 #查看TPS和吞吐量信息
iostat -d -x -k 1 10 #查看设备使用率(%util)、响应时间(await)
iostat -c 1 10 #查看cpu状态
[root@compute1 ~]# iostat -d -k 1 10
Linux 3.10.0-862.6.3.el7.x86_64
(compute1) 08/01/2019 _x86_64_ (4 CPU)
Device: tps kB_read/s
kB_wrtn/s kB_read kB_wrtn
sda 12.21 35.94 617.97
102591833 1763934922
Device: tps kB_read/s
kB_wrtn/s kB_read kB_wrtn
sda 24.00 3072.00 0.00 3072 0
Device: tps kB_read/s
kB_wrtn/s kB_read kB_wrtn
sda 40.00 5120.00 0.00 5120 0
Device: tps kB_read/s
kB_wrtn/s kB_read kB_wrtn
sda 24.00 3072.00 0.00 3072 0
Device: tps kB_read/s
kB_wrtn/s kB_read kB_wrtn
sda 26.00 3328.00 0.00 3328 0
参数-d表示,显示设备(磁盘)使用状态;-k某些使用block为单位的列强制使用Kilobytes为单位;1 10表示,数据显示每隔1秒刷新一次,共显示10次。
tps:该设备每秒的传输次数(Indicate the number of transfers per second that were issued to the
device.)。“一次传输”意思是“一次I/O请求”。多个逻辑请求可能会被合并为“一次I/O请求”。“一次传输”请求的大小是未知的。
kB_read/s:每秒从设备(drive expressed)读取的数据量;kB_wrtn/s:每秒向设备(drive expressed)写入的数据量;kB_read:读取的总数据量;kB_wrtn:写入的总数量数据量;这些单位都为Kilobytes。
执行命令:
iostat -xdm 1
[root@localhost zqc]# iostat -xdm 1
Linux 3.10.0-514.el7.x86_64
(localhost.localdomain)
08/01/2019 _x86_64_ (2 CPU)
Device: rrqm/s wrqm/s
r/s w/s rMB/s
wMB/s avgrq-szavgqu-sz awaitr_await w_await svctm %util
sda 0.39 1.50
0.63 38.54 0.06
1.19 65.42 0.54
13.83 7.94 13.92
11.82 46.29
svctm:平均每次设备I/O操作的服务时间(以毫秒为单位)。正常情况下svctm应该是小于await值的,而svctm的大小和磁盘性能有关,CPU、内存的负荷也会对svctm值造成影响,过多的请求也会间接的导致svctm值的增加。
await:值的大小一般取决与svctm的值和I/O队列长度以及I/O请求模式,如果svctm的值与await很接近,表示几乎没有I/O等待,磁盘性能很好,如果await的值远高于svctm的值,则表示I/O队列等待太长,系统上运行的应用程序将变慢,此时可以通过更换更快的硬盘来解决问题。每一个IO请求的处理的平均时间(单位是微秒毫秒)。这里可以理解为IO的响应时间,一般地系统IO响应时间应该低于5ms,如果大于10ms就比较大了。
%util:项的值也是衡量磁盘I/O的一个重要指标,如果%util接近100%,表示磁盘产生的I/O请求太多,I/O系统已经满负荷的在工作,该磁盘可能存在瓶颈。长期下去,势必影响系统的性能,可以通过优化程序或者通过更换更高、更快的磁盘来解决此问题。
avgqu-sz:如果I/O请求压力持续超出磁盘处理能力,该值将增加。如果单块磁盘的队列长度持续超过2,一般认为该磁盘存在I/O性能问题。需要注意的是,如果该磁盘为磁盘阵列虚拟的逻辑驱动器,需要再将该值除以组成这个逻辑驱动器的实际物理磁盘数目,以获得平均单块硬盘的I/O等待队列长度。
输出内容详解:
输出内容详解:
%user:CPU处在用户模式下的时间百分比
%nice:CPU处在带NICE值的用户模式下的时间百分比
%system:CPU处在系统模式下的时间百分比
%iowait:CPU等待输入输出完成时间的百分比
%steal:管理程序维护另一个虚拟处理器时,虚拟CPU的无意识等待时间百分比
%idle:CPU空闲时间百分比
当然了,iostat命令的重点不是用来看CPU的,重点是用来监测磁盘性能的。
Device:设备名称
rrqm/s:每秒合并到设备的读取请求数
wrqm/s:每秒合并到设备的写请求数
r/s:每秒向磁盘发起的读操作数
w/s:每秒向磁盘发起的写操作数
rkB/s:每秒读K字节数
wkB/s:每秒写K字节数
avgrq-sz:平均每次设备I/O操作的数据大小
avgqu-sz:平均I/O队列长度
await:平均每次设备I/O操作的等待时间(毫秒),一般地,系统I/O响应时间应该低于5ms,如果大于10ms就比较大了
r_await:每个读操作平均所需的时间;不仅包括硬盘设备读操作的时间,还包括了在kernel队列中等待的时间
w_await:每个写操作平均所需的时间;不仅包括硬盘设备写操作的时间,还包括了在kernel队列中等待的时间
svctm:平均每次设备I/O操作的服务时间(毫秒)(这个数据不可信!)
%util:一秒中有百分之多少的时间用于I/O操作,即被IO消耗的CPU百分比,一般地,如果该参数是100%表示设备已经接近满负荷运行了
3.iotop命令
可监测到哪一个程序使用的磁盘IO的信息
yum install -y iotop
[root@localhost
zqc]# iotop
Total DISK READ : 0.00 B/s | Total DISK WRITE : 303.62 K/s
Actual DISK READ: 0.00 B/s | Actual DISK WRITE: 209.91 K/s
TID PRIO USER
DISK READ DISK WRITE SWAPIN
IO> COMMAND
26617be/4 mysql 0.00 B/s 44.98 K/s
0.00 % 0.20 %mysqld--daemonize
--pid-file=/var/run/mysqld/mysqld.pid
16177 be/4 mysql 0.00 B/s
33.74 K/s 0.00 % 0.17 % mysqld --daemonize
--pid-file=/var/run/mysqld/mysqld.pid
16956 be/4 mysql 0.00 B/s 26.24 K/s
0.00 % 0.11 % mysqld --daemonize
--pid-file=/var/run/mysqld/mysqld.pid
16955 be/4 mysql 0.00 B/s 29.99 K/s
0.00 % 0.10 % mysqld --daemonize
--pid-file=/var/run/mysqld/mysqld.pid
1636
be/4 mysql 0.00 B/s 18.74 K/s
0.00 % 0.08 % mysqld --daemonize
--pid-file=/var/run/mysqld/mysqld.pid
26919 be/4 mysql 0.00 B/s 18.74 K/s
0.00 % 0.06 % mysqld --daemonize
--pid-file=/var/run/mysqld/mysqld.pid
16824be/4 root 0.00 B/s 7.50 K/s
0.00 % 0.00 %java-jar
bigdata-front-service-syj.jar
16830 be/4 root 0.00 B/s 3.75 K/s
0.00 % 0.00 % java -jar
bigdata-front-service-syj.jar
16832 be/4 root 0.00 B/s 3.75 K/s
0.00 % 0.00 % java -jar
bigdata-front-service-syj.jar
参考文档:
http://www.orczhou.com/index.php/2010/03/iostat-detail/
https://www.cnblogs.com/mauricewei/p/10502539.html