Linux中常用的监控CPU整体性能

Linux中常用的监控CPU整体性能的工具有：
mpstat： mpstat 不但能查看所有CPU的平均信息，还能查看指定CPU的信息。
vmstat：只能查看所有CPU的平均信息；查看cpu队列信息；
iostat: 只能查看所有CPU的平均信息。
sar： 与mpstat 一样，不但能查看CPU的平均信息，还能查看指定CPU的信息。
top：显示的信息同ps接近，但是top可以了解到CPU消耗，可以根据用户指定的时间来更新显示。
oprofile：OProfile 是一个低开销的系统全局的性能监视工具。它使用处理器上的性能监视硬件来检索关于内核以及系统上的可执行文件的信息，例如内存是何时被引用的；L2 缓存请求数量；收到的硬件中断数量等
实验环境Centos5.3
vmstat是系统自带工具
iostat sar 需要安装sysstat-7.0.2-3.el5.i386.rpm 才能使用
[root@localhost CentOS]# rpm -ivh sysstat-7.0.2-3.el5.i386.rpm
1. /proc/stat/
包含了所有CPU活动的信息，该文件中的所有值都是从系统启动开始累计到当前时刻

输出解释
CPU 以及CPU0、CPU1每行的每个参数意思（以第一行为例）为：
参数 解释
user (15914) 从系统启动开始累计到当前时刻，用户态的CPU时间（单位：jiffies） ，不包含 nice值为负进程。1jiffies=0.01秒
nice (9940) 从系统启动开始累计到当前时刻，nice值为负的进程所占用的CPU时间（单位：jiffies）
system (5203) 从系统启动开始累计到当前时刻，核心时间（单位：jiffies）
idle (18190950) 从系统启动开始累计到当前时刻，除硬盘IO等待时间以外其它等待时间（单位：jiffies）
iowait (18361) 从系统启动开始累计到当前时刻，硬盘IO等待时间（单位：jiffies） ，
irq (607) 从系统启动开始累计到当前时刻，硬中断时间（单位：jiffies）
softirq (2697) 从系统启动开始累计到当前时刻，软中断时间（单位：jiffies）
CPU时间=user+system+nice+idle+iowait+irq+softirq
“intr”这行给出中断的信息，第一个为自系统启动以来，发生的所有的中断的次数；然后每个数对应一个特定的中断自系统启动以来所发生的次数。
“ctxt”给出了自系统启动以来CPU发生的上下文交换的次数。
“btime”给出了从系统启动到现在为止的时间，单位为秒。
“processes (total_forks) 自系统启动以来所创建的任务的个数目。
“procs_running”：当前运行队列的任务的数目。
“procs_blocked”：当前被阻塞的任务的数目。
2. /proc/loadavg
该文件中的所有值都是从系统启动开始累计到当前时刻。该文件只给出了所有CPU的集合信息，不能该出每个CPU的信息。
[root@localhost ~]# cat /proc/loadavg
0.27 0.16 0.10 1/170 11343
每个值的含义为：
参数 解释
lavg_1 (0.27) 1-分钟平均负载
lavg_5 (0.16) 5-分钟平均负载
lavg_15(0.10) 15-分钟平均负载
nr_running (1) 在采样时刻，运行队列的任务的数目，与/proc/stat的procs_running表示相同意思
nr_threads (170) 在采样时刻，系统中活跃的任务的个数（不包括运行已经结束的任务）
last_pid(13343) 最大的pid值，包括轻量级进程，即线程。
假设当前有两个CPU，则每个CPU的当前任务数为0.27/2=0.135
3. uptime
uptime是Linux系统常用的命令，用来报告系统已经运行多长时间，依此显示的信息：现在时间，系统已经运行了的时间，目前有多少登陆用户， 1分钟系统平均负载，5分钟系统平均负载，15分钟系统平均负载。该命令从/proc/loadavg 中获得load average的信息。
范例1：系统只用一个CPU
[root@localhost ~]# uptime
06:10:52 up 1 day, 1:33, 1 user, load average: 0.00, 0.07, 0.07
通常来说：如果系统有n个CPU而且平均负载小于n,则说明某些CPU还有空闲的时间片。通过该命令，你能知道CPU是否繁忙，但是无法知道为什么忙。
4. mpstat
mpstat是Multiprocessor Statistics的缩写，是实时系统监控工具。其报告与CPU的一些统计信息，这些信息存放在/proc/stat文件中。在多CPUs系统里，其不但能查看所有CPU的平均状况信息，而且能够查看特定CPU的信息。下面只介绍 mpstat与CPU相关的参数，mpstat的语法如下：
mpstat [-P {|ALL}] [internal [count]]
参数的含义如下：
参数 解释
-P {|ALL} 表示监控哪个CPU， cpu在[0,cpu个数-1]中取值
internal 相邻的两次采样的间隔时间
count 采样的次数，count只能和delay一起使用
当没有参数时，mpstat则显示系统启动以后所有信息的平均值。有interval时，第一行的信息自系统启动以来的平均信息。从第二行开始，输出为前一个interval时间段的平均信息。与CPU有关的输出的含义如下：
参数 解释 从/proc/stat获得数据
CPU 处理器ID
user 在internal时间段里，用户态的CPU时间（%） ，不包含 nice值为负 进程 ?usr/?total*100
nice 在internal时间段里，nice值为负进程的CPU时间（%） ?nice/?total*100
system 在internal时间段里，核心时间（%） ?system/?total*100
iowait 在internal时间段里，硬盘IO等待时间（%） ?iowait/?total*100
irq 在internal时间段里，软中断时间（%） ?irq/?total*100
soft 在internal时间段里，软中断时间（%） ?softirq/?total*100
idle 在internal时间段里，CPU除去等待磁盘IO操作外的因为任何原因而空闲的时间闲置时间 （%） ?idle/?total*100
intr/s 在internal时间段里，每秒CPU接收的中断的次数 ?intr/?total*100
CPU总的工作时间=total_cur=user+system+nice+idle+iowait+irq+softirq
total_pre=pre_user+ pre_system+ pre_nice+ pre_idle+ pre_iowait+ pre_irq+ pre_softirq
user=user_cur – user_pre
total=total_cur-total_pre
其中_cur 表示当前值，_pre表示interval时间前的值。上表中的所有值可取到两位小数点。
范例1：average mode (粗略信息)
当mpstat不带参数时，输出为从系统启动以来的平均值。
[root@localhost ~]# mpstat
Linux 2.6.18-128.el5 (localhost.localdomain)    2010年04月09日
05时43分20秒 CPU   %user   %nice    %sys %iowait    %irq   %soft %steal   %idle    intr/s
05时43分20秒 all    0.07    0.05    0.02    0.06    0.00    0.01    0.00   99.77   1019.45
 
5. vmstat
vmstat是Virtual Meomory Statistics（虚拟内存统计）的缩写, 是实时系统监控工具。该命令通过使用knlist子程序和/dev/kmen伪设备驱动器访问这些数据，输出信息直接打印在屏幕。vmstat反馈的与CPU相关的信息包括：
（1）多少任务在运行
（2）CPU使用的情况
（3）CPU收到多少中断
（4）发生多少上下文切换
下面只介绍 Vmstat与CPU相关的参数
vmstat的语法如下：
vmstat [delay [count]]
参数的含义如下：
参数 解释
delay 相邻的两次采样的间隔时间
count 采样的次数，count只能和delay一起使用
当没有参数时，vmstat则显示系统启动以后所有信息的平均值。有delay时，第一行的信息自系统启动以来的平均信息。从第二行开始，输出为前一个delay时间段的平均信息。当系统有多个CPU时，输出为所有CPU的平均值。
与CPU有关的输出的含义 (采用进一法)
参数 解释 从/proc/stat获得数据
任务的信息
r 在internal时间段里，运行队列里等待CPU的任务（任务）的个数，即不包含vmstat进程 procs_running-1
b 在internal时间段里，被资源阻塞的任务数（I/0，页面调度，等等.） ，通常情况下是接近0的 procs_blocked
CPU信息 所有值取整（四舍五入）
us 在internal时间段里，用户态的CPU时间(%)，包含 nice值为负进程 (?user+?nice)/?total*100
sy 在internal时间段里，核心态的CPU时间(%) (?system+?irq+?softirq)/?total*100
id 在internal时间段里，cpu空闲的时间，不包括等待i/o的时间(%) ?idle/?total*100
wa 在internal时间段里，等待i/o的时间(%) ?iowait/?total*100
系统信息
in 在internal时间段里，每秒发生中断的次数 ?intr/interval
cs 在internal时间段里，每秒上下文切换的次数，即每秒内核任务交换的次数 ?ctxt/interval
total_cur=user+system+nice+idle+iowait+irq+softirq
total_pre=pre_user+ pre_system+ pre_nice+ pre_idle+ pre_iowait+ pre_irq+ pre_softirq
total=total_cur-total_pre
范例1：average mode (粗略信息)
当vmstat不带参数时，对应的输出值是从系统启动以来的平均值，而r和b则对应的是完成这一命令时，系统的值。从下面例子，可以看出系统基本出去闲置状态（idle）。自启动以来，CPU在用户态消耗时间为5%，在核心态消耗为本1%，剩下的为闲置时间。需要指出的是：这里的用户态时间包括nice值为负的进程的时间。
[root@localhost ~]# vmstat
procs -----------memory---------- ---swap-- -----io---- --system-- -----cpu------
r b   swpd   free   buff cache   si   so    bi    bo   in   cs us sy id wa st
0 0      4 36184 131916 325460    0    0     2     5   25   25 0 0 100 0 0
范例2：average mode (详细信息)
命令格式：
vmstat –s
这里只讨论与CPU相关信息。“CPU ticks”表示自系统启动CPU运行时间，这里以tick为时间单位。用tick来西安市us,sy id 和wa的时间；forks指自从系统启动以来，所创建的新任务的个数。这些信息从/proc/stat 的第一行和”processes”行获得。

结果解释
参数 描述 /proc/stat
non-nice user cpu ticks 自系统启动以来，CPU在用户态下运行非nice进程的时间，单位为jiffies user
nice user cpu ticks 自系统启动以来，CPU在用户态下运行nice进程的时间，单位为jiffies nice
system cpu ticks 自系统启动以来，CPU处于系统状态的时间，单位为jiffies sys
idle cpu ticks 自系统启动以来，CPU处于闲置状态的时间，单位为jiffies idle
IO-wait cpu ticks 自系统启动以来，CPU处理IO中断的时间，单位为jiffies iowait
IRQ cpu ticks 自系统启动以来，CPU处理硬中断的时间，单位为jiffies irq
softing cpu ticks 自系统启动以来，CPU处理软中断的时间，单位为jiffies Softirq
interrupts 自系统启动以来，发生的所有的中断的次数目 Intr
CPU context switches 自系统启动以来，发生的上下文交换的次数 Ctxt
boot time 自系统启动以来到现在运行的时间，单位为秒。 btime
forks 自系统启动以来所创建的任务的个数目。 Process
范例3：定期采样(delay [count])
定期采样数据是指每隔delay时间，采样一次。当count 为0时，vmstat 将不停地定期报告信息；否则当报告count次后，vmstat 命令停止运行。
第一行的信息如同范例1，是自系统启动以来的平均信息。从第二行开始，每行的意思是：r和b采样那一时刻系统运行队列和等待队列的情况；而usystem参数（in,cs）以及CPU参数（us,sy,id,wa）对应的输出值是系统在前一个delay的情况。
从下面例子可以看出上下文交换的次数小于中断的发生次数。当系统大部分时间是空闲并且中断大部分是时间中断时，这种现象极可能发生。当时间中断发生时, 因为调度器没有什么任务可调度，所以很少发生上下文切换。