iostat 各项指标含义
iostat -x 1 -d sda
Device: rrqm/s wrqm/s r/s w/s rsec/s wsec/s avgrq-sz avgqu-sz await svctm %util
sda 0.05 63.14 0.11 28.55 0.01 0.00 0.00 0.06 2.11 0.69 1.97
rrqm/s: 每秒进行merge 的读操作数目。即delta(rmerge)/s
wrqm/s: 每秒进行merge 的写操作数目。即delta(wmerge)/s
r/s: 每秒完成的读I/O 设备次数。即delta(rio)/s
w/s: 每秒完成的写I/O 设备次数。即delta(wio)/s
rsec/s: 每秒读扇区数。即delta(rsect)/s
wsec/s: 每秒写扇区数。即delta(wsect)/s
rkB/s: 每秒读K字节数。是rsect/s 的一半,因为每扇区大小为512字节。
wkB/s: 每秒写K字节数。是wsect/s 的一半。
avgrq-sz: 平均每次设备I/O操作的数据大小(扇区)。即delta(rsect+wsect)/delta(rio+wio) avgqu-sz: 平均I/O队列长度。即delta(aveq)/s/1000 (因为aveq的单位为毫秒)。
await: 平均每次设备I/O操作的等待时间(毫秒)。即delta(ruse+wuse)/delta(rio+wio) svctm: 平均每次设备I/O操作的服务时间(毫秒)。即delta(use)/delta(rio+wio)
%util: 一秒中有百分之多少的时间用于I/O 操作,或者说一秒中有多少时间I/O 队列是非空的
1.磁盘I/O性能监控命令
1)iostat命令
iostat 命令主要通过观察物理磁盘的活动时间以及他们的平均传输速度,监控系统输入/ 输出设备负载。根据iostat 命令产生的报告,用户可确定一个系统配置是否平衡,并据此在物理磁盘与适配器之间更好地平衡输入/ 输出负载。iostat 工具的主要目的是通过监控磁盘的利用率,而探测到系统中的I/O 瓶颈。不同操作系统命令格式输出格式略有不同,管理员可以通过查看用户手册来确定它的用法。
安装iostat
iostat命令,如果没有使用命令,则需要进行安装。
安装命令
apt-get install sysstat
deb包下载地址(Ubuntu Server 9.10)
tw.archive.ubuntu/ubuntu/pool/main/s/sysstat/sysstat_9.0.3-2ubuntu1_amd64 .deb
targz包下载地址
pagesperso-orange.dard/sysstat-9.1.
2)sar命令
sar 命令报告CPU 的使用情况,I/O 以及其它系统行为。sar 命令可以收集,报告以及保存系统行为信息。以这种方式收集到的数据对于确定系统的时间周期特征和决定峰值使用时间是很有用的。但要注意的是,sar 命令自己运行时会产生相当数量的读写,因此最好在没
有工作量的情况下运行sar 统计,看看sar 对总的统计数字有多大的影响。
2.磁盘I/O性能指标
在介绍磁盘I/O 监控命令前,我们需要了解磁盘I/O 性能监控的指标,以及每个指标的所揭示的磁盘某方面的性能。磁盘I/O 性能监控的指标主要包括:
1)每秒I/O 数(IOPS 或tps)
硬盘性能指标对于磁盘来说,一次磁盘的连续读或者连续写称为一次磁盘I/O, 磁盘的IOPS 就是每秒磁盘连续读次数和连续写次数之和。当传输小块不连续数据时,该指标有重要参考意义。
2)吞吐量(Throughput)
指硬盘传输数据流的速度,传输数据为读出数据和写入数据的和。其单位一般为Kbps, MB/s 等。当传输大块不连续数据的数据,该指标有重要参考作用。
3)平均I/O 数据尺寸
平均I/O 数据尺寸为吞吐量除以I/O 数目,该指标对揭示磁盘使用模式有重要意义。一般来说,如果平均I/O 数据尺寸小于32K,可认为磁盘使用模式以随机存取为主;如果平均每次I/O 数据尺寸大于32K,可认为磁盘使用模式以顺序存取为主。
4)磁盘活动时间百分比(Utilization)%util
磁盘处于活动时间的百分比,即磁盘利用率,磁盘在数据传输和处理命令(如寻道)处于活动状态。磁盘利用率与资源争用程度成正比,与性能成反比。也就是说磁盘利用率越高,资源争用就越严重,性能也就越差,响应时间就越长。一般来说,如果磁盘利用率超过70%,应用进程将花费较长的时间等待I/O 完成,因为绝大多数进程在等待过程中将被阻塞或休眠。
5)服务时间(ServiceTime)svctm
指磁盘读或写操作执行的时间,包括寻道,旋转时延,和数据传输等时间。其大小一般和磁盘性能有关,CPU/ 内存的负荷也会对其有影响,请求过多也会间接导致服务时间的增加。如果该值持续超过20ms,一般可考虑会对上层应用产生影响。
6)I/O 等待队列长度(Queue Length)
指待处理的I/O 请求的数目,如果I/O 请求压力持续超出磁盘处理能力,该值将增加。如果单块磁盘的队列长度持续超过2,一般认为该磁盘存在I/O 性能问题。需要注意的是,如果该磁盘为磁盘阵列虚拟的逻辑驱动器,需要再将该值除以组成这个逻辑驱动器的实际物理磁盘数目,以获得平均单块硬盘的I/O 等待队列长度。
7)等待时间(Wait Time)
指磁盘读或写操作等待执行的时间,即在队列中排队的时间。如果I/O 请求持续超出磁盘处理能力,意味着来不及处理的I/O 请求不得不在队列中等待较长时间。通过监控以上指标,并将这些指标数值与历史数据,经验数据以及磁盘标称值对比,必要时结合CPU、内存、交换分区的使用状况,不难发现磁盘I/O潜在或已经出现的问题。但如果避免和解决这些问题呢?这就需要利用到磁盘I/O 性能优化方面的知识和技术。限于本文主题和篇幅,仅列出一些常用的优化方法供读者参考:
(1)调整数据布局,尽量将I/O 请求较合理的分配到所有物理磁盘中;
(2)对于RAID 磁盘阵列,尽量使应用程序I/O 等于条带尺寸或者为条带尺寸的倍数。
并选取合适的RAID 方式,如RAID10,RAID5;
(3)增大磁盘驱动程序的队列深度,但不要超过磁盘的处理能力,否则,部分I/O 请求会因为丢失而重新发出,这将降低性能;
(4)应用缓存技术减少应用存取磁盘的次数,缓存技术可应用在文件系统级别或者应用程序级别;
(5)由于多数数据库中已包括经优化后的缓存技术,数据库I/O 宜直接存取原始磁盘分区(rawpartition)或者利用绕过文件系统缓存的DIO 技术(direct IO);
(6)利用内存读写带宽远比直接磁盘I/O 操作性能优越的特点,将频繁访问的文件或数据置于内存中。
3.iostat使用
[命令:] iostat [-c|-d] [-k] [-t] [间隔描述] [检测次数]
参数:
-c : 仅显示cpu的状态
-d : 仅显示存储设备的状态,不可以和-c一起使用
-k : 默认显示的是读入读出的block信息,用-k可以改成KB大小来显示
-t: 显示日期
-p device | ALL : device为某个设备或者某个分区,如果使用ALL,就表示要显示所有分区和设备的信息
1)基本使用
$iostat-d -k 1 10
说明:参数-d 表示,显示设备(磁盘)使用状态;-k某些使用block为单位的列强制使用Kilobytes为单位;1 10表示,数据显示每隔1秒刷新一次,共显示10次,每一次的统计都是上一次的统计时间到这次的统计时间之间的统计数据。
2)-x 参数
使用-x参数我们可以获得更多统计信息。
$iostat -d -x -k 1 10
3)-c 参数
获取cpu部分状态值
$iostat -c 1 10
4)常见用法
$iostat -d -k 1 10
#查看TPS和吞吐量信息
$iostat -d -x -k 1 10
#查看设备使用率(%util)、响应时间(await)
$iostat -c 1 10
#查看cpu状态
5)mpstat命令
mpstat是MultiProcessor Statistics的缩写,是实时系统监控工具。其报告与CPU的一些统计
信息,这些信息存放在/proc/stat文件中。在多CPUs系统里,其不但能查看所有CPU的平均状况信息,而且能够查看特定CPU的信息。下面只介绍mpstat与CPU相关的参数,mpstat 的语法如下:
mpstat [-P {|ALL}] [internal [count]]
参数解释
-P {|ALL} 表示监控哪个CPU,cpu在[0,cpu个数-1]中取值
internal 相邻的两次采样的间隔时间
count 采样的次数,count只能和delay一起使用
当没有参数时,mpstat则显示系统启动以后所有信息的平均值。有interval时,第一行的信息自系统启动以来的平均信息。
(1)$mpstat
mpstat不带参数时,输出为从系统启动以来的平均值。
(2)$mpstat-P ALL 2 3
2秒产生所有处理器的统计数据报告,统计三次,默认输出所有的处理器的统计数据;(3)$mpstat–P 0 2 3
2秒产生0号处理器的统计数据报告,统计三次;
4.iostat相关参数说明
参数
英文说明
说明
rrqm/s read request merge 每秒进行merge 的读操作数目。即delta(rmerge)/s
wrqm/s write request merge 每秒进行merge 的写操作数目。即delta(wmerge)/s
r/s read 每秒完成的读I/O 设备次数。即delta(rio)/s
w/s write 每秒完成的写I/O 设备次数。即delta(wio)/s
rsec/s read section 每秒读扇区数。即delta(rsect)/s
wsec/s write section 每秒写扇区数。即delta(wsect)/s
rkB/s read kilo byte 每秒读K字节数。是rsect/s 的一半,因为每扇区大小为512字节。(需要计算)
wkB/s write kilo byte 每秒写K字节数。是wsect/s 的一半。(需要计算)
avgrq-sz average request size 平均每次设备I/O操作的数据大小(扇区)。delta(rsect+wsect)/delta(rio+wio)
avgqu-sz average queue size 平均I/O队列长度。即delta(aveq)/s/1000 (因为aveq的单位为毫秒)
await average wait 平均每次设备I/O操作的等待时间(毫秒)。即delta(ruse+wuse)/delta(rio+wio)
svctm service time 平均每次设备I/O操作的服务时间(毫秒)。即delta(use)/delta(rio+wio) %util utilty 一秒中有百分之多少的时间用于I/O 操作,或者说一秒中有多少时间I/O 队列是非空的。即delta(use)/s/1000 (因为use的单位为毫秒)
如果%util接近100%,说明产生的I/O请求太多,I/O系统已经满负荷,该磁盘可能存在瓶颈,idle小于70% IO压力就较大了,一般读取速度有较多的wait。同时可以结合vmstat(virtual memory status)查看b参数(等待资源的进程数)和wa参数(IO等待所占用的CPU时间的百分比,高过30%时IO压力高)
另外还可以参考svctm,由于它一般要小于await (因为同时等待的请求的等待时间被重复计算了),svctm 的大小一般和磁盘性能有关,CPU/内存的负荷也会对其有影响,请求过多也会间接导致svctm 的增加。await 的大小一般取决于服务时间(svctm) 以及I/O 队列的长度和I/O 请求的发出模式。如果svctm 比较接近await,说明I/O 几乎没有等待时间;如果await 远大于svctm,说明I/O 队列太长,应用得到的响应时间变慢,如果响应时间超过了用户可以容许的范围,这时可以考虑更换更快的磁盘,调整内核elevator 算法,优化应用,或者升级CPU。队列长度(avgqu-sz)也可作为衡量系统I/O 负荷的指标,但由于avgqu-sz 是按照单位时间的平均值,所以不能反映瞬间的I/O 洪水。
5.例子(I/O 系统vs. 超市排队)
举一个例子,我们在超市排队checkout 时,怎么决定该去哪个交款台呢? 首当是看排的队人数,5个人总比20人要快吧? 除了数人头,我们也常常看看前面人购买的东西多少,如果前面有个采购了一星期食品的大妈,那么可以考虑换个队排了。还有就是收银员的速度了,如果碰上了连钱都点不清楚的新手,那就有的等了。另外,时机也很重要,可能 5 分钟前还人满为患的收款台,现在已是人去楼空,这时候交款可是很爽啊,当然,前提是那过去的5 分钟里所做的事情比排队要有意义(不过我还没发现什么事情比排队还无聊的)。
I/O 系统也和超市排队有很多类似之处:
爀/s+w/s 类似于交款人的总数
猀均队列长度(avgqu-sz)类似于单位时间里平均排队人的个数
猀均服务时间(svctm)类似于收银员的收款速度
猀均等待时间(await)类似于平均每人的等待时间
猀均I/O数据(avgrq-sz)类似于平均每人所买的东西多少
I/O 操作率(%util)类似于收款台前有人排队的时间比例。
参数输出的分析
#iostat -x 1
avg-cpu: %user %nice %sys %idle
16.24 0.00 4.31 79.44
Device: rrqm/s wrqm/s r/s w/s rsec/s wsec/s rkB/s wkB/s avgrq-sz avgqu-sz await svctm %util sda 0.00 44.90 1.02 27.55 8.16 579.59 4.08 289.80 20.57 22.35 78.21 5.00 14.29
上面的iostat 输出表明秒有28.57 次设备I/O 操作:
总IO(io)/s=r/s(读)+w/s(写)=1.02+27.55 = 28.57 (次/秒) 其中写操作占了主体(w:r = 27:1)
平均每次设备I/O操作只需要5ms就可以完成,但每个I/O请求却需要等上78ms,为什么? 因为发出的I/O 请求太多(每秒钟约29个),假设这些请求是同时发出的,那么平均等待时间可以这样计算:
平均等待时间=单个I/O服务时间* ( 1 + 2 + … + 请求总数-1) /请求总数
应用到上面的例子: 平均等待时间= 5ms * (1+2+…+28)/29 = 70ms,和iostat 给出的78ms 的平均等待时间很接近。这反过来表明I/O 是同时发起的。
每秒发出的I/O 请求很多(约29个),平均队列却不长(只有2个左右),这表明这29 个请求的到来并不均匀,大部分时间I/O 是空闲的。
一秒中有14.29% 的时间I/O 队列中是有请求的,也就是说,85.71% 的时间里I/O 系统无事可做,所有29 个I/O 请求都在142毫秒之内处理掉了。
delta(ruse+wuse)/delta(io)= await = 78.21 => delta(ruse+wuse)/s =78.21 * delta(io)/s = 78.21*28.57 =2232.8,表明每秒内的I/O请求总共需要等待2232.8ms。所以平均队列长度应
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。
发表评论