单纯的监控linux系统top和sar就够了
top 了解概括，sar了解详细细节，可以很方便的定位系统问题
1 系统状态
系统当前时间 、系统到目前为止已运行的时间、当前登录系统的用户数量、系统负载(任务队列的平均长度)三个值分别为1分钟、5分钟、15分钟前到现在的平均值
2 task
所有启动的进程数”、“正在运行的进程数”、“挂起的进程数”、“停止的进程数”、“僵尸进程数”。
3 cpu
用户空间占用CPU百分比”、“内核空间占用CPU百分比”、“用户空间内改变过优先级的进程占用CPU百分比”、“空闲CPU百分比”、“等待输入输出CPU时间百分比”、“CPU服务于硬件中断所耗费的时间总额”、“CPU服务软中断所耗费的时间总额”、“Steal Time”
4 mem
物理内存总量”、“已使用的物理内存”、“空闲物理内存”、“内核缓存内存量
5 swap
交换区总量”、“已使用交互区总量”、“空闲交换区总量”、“缓冲的交换区总量”
6 各个命令说明
“进程ID”、“进程所有者”、“优先级”、“nice值，负值表示高优先级，正值表示低优先级”、“进程使用的虚拟内存总量”、“进程使用的、未被换出的物理内存大小”、“共享内存大小”、“进程状态”、“上次更新到现在的CPU时间占用百分比”、“进程使用的物理内存百分比”、“进程使用CPU总时间”、“命令名、命令行”。
sar命令
sar常用的格式
sar [options] [-A] [-o file] t [n]
t为采样间隔，n为采样次数，默认值是1；
-o file表示将命令结果以二进制格式存放在文件中，file 是文件名。
命令的列表
-A：所有报告的总和
-P：设定CPU
-u：输出CPU使用情况的统计信息
-v：输出inode、文件和其他内核表的统计信息
-d：输出每一个块设备的活动信息
-n：汇报网络情况
-q：汇报队列长度和负载信息
-r：输出内存和交换空间的统计信息
-b：显示I/O和传送速率的统计信息
-a：文件读写情况
-c：输出进程统计信息，每秒创建的进程数
-R：输出内存页面的统计信息
-y：终端设备活动情况
-w：输出系统交换活动信息
监控cpu
sar -u 1 3 每秒钟一次总共三次
sar -u 1 3
Linux 2.6.32-431.11.2.el6.toa.2.x86_64 (HP11012317.rb.simulation) 11/07/2017 _x86_64_ (8 CPU)
04:36:24 PM CPU %user %nice %system %iowait %steal %idle
04:36:25 PM all 0.38 0.00 0.50 0.00 0.00 99.12
04:36:26 PM all 1.13 0.00 1.00 0.25 0.00 97.62
04:36:27 PM all 0.88 0.00 0.50 0.00 0.00 98.62
Average: all 0.79 0.00 0.67 0.08 0.00 98.46
CPU：all 表示统计信息为所有 CPU 的平均值。
%user：显示在用户级别(application)运行使用 CPU 总时间的百分比。
%nice：显示在用户级别，用于nice操作，所占用 CPU 总时间的百分比。
%system：在核心级别(kernel)运行所使用 CPU 总时间的百分比。
%iowait：显示用于等待I/O操作占用 CPU 总时间的百分比。
%steal：管理程序(hypervisor)为另一个虚拟进程提供服务而等待虚拟 CPU 的百分比。
%idle：显示 CPU 空闲时间占用 CPU 总时间的百分比。
常见的问题:
iowait用来查看io操作
idle查看cpu是否空闲
观察所有的cpu
sar -P ALL -u 1 3
监控指定的cpu
sar -P 0 -u 1 3
监控内存和交换区
sar -r 1 3
04:41:39 PM kbmemfree kbmemused %memused kbbuffers kbcached kbcommit %commit
04:41:40 PM 1647456 10535116 86.48 315072 1517616 53269880 258.95
04:41:41 PM 1647348 10535224 86.48 315072 1517700 53269872 258.95
04:41:42 PM 1646588 10535984 86.48 315080 1517944 53272156 258.97
Average: 1647131 10535441 86.48 315075 1517753 53270636 258.96
kbmemfree：这个值和free命令中的free值基本一致,所以它不包括buffer和cache的空间.
kbmemused：这个值和free命令中的used值基本一致,所以它包括buffer和cache的空间.
%memused：这个值是kbmemused和内存总量(不包括swap)的一个百分比.
kbbuffers和kbcached：这两个值就是free命令中的buffer和cache.
kbcommit：保证当前系统所需要的内存,即为了确保不溢出而需要的内存(RAM+swap).
%commit：这个值是kbcommit与内存总量(包括swap)的一个百分比.
监控文件节点 inode
sar -v 1 3
04:44:02 PM dentunusd file-nr inode-nr pty-nr
04:44:03 PM 156851 15008 64195 685
04:44:04 PM 156845 14912 64172 685
04:44:05 PM 156845 14912 64168 685
Average: 156847 14944 64178 685
dentunusd：目录高速缓存中未被使用的条目数量
file-nr：文件句柄（file handle）的使用数量
inode-nr：索引节点句柄（inode handle）的使用数量
pty-nr：使用的pty数量
监控内存分页
sar -B 1 3
04:45:03 PM pgpgin/s pgpgout/s fault/s majflt/s pgfree/s pgscank/s pgscand/s pgsteal/s %vmeff
04:45:04 PM 3.96 79.21 2717.82 0.00 1111.88 0.00 0.00 0.00 0.00
04:45:05 PM 16.33 32.65 731.63 0.00 419.39 0.00 0.00 0.00 0.00
04:45:06 PM 16.00 100.00 463.00 0.00 391.00 0.00 0.00 0.00 0.00
Average: 12.04 70.90 1312.71 0.00 643.81 0.00 0.00 0.00 0.00
pgpgin/s：表示每秒从磁盘或SWAP置换到内存的字节数(KB)
pgpgout/s：表示每秒从内存置换到磁盘或SWAP的字节数(KB)
fault/s：每秒钟系统产生的缺页数,即主缺页与次缺页之和(major + minor)
majflt/s：每秒钟产生的主缺页数.
pgfree/s：每秒被放入空闲队列中的页个数
pgscank/s：每秒被kswapd扫描的页个数
pgscand/s：每秒直接被扫描的页个数
pgsteal/s：每秒钟从cache中被清除来满足内存需要的页个数
%vmeff：每秒清除的页(pgsteal)占总扫描页(pgscank+pgscand)的百分比
监控io
sar -b 1 3
04:46:22 PM tps rtps wtps bread/s bwrtn/s
04:46:23 PM 761.62 3.03 758.59 24.24 38181.82
04:46:24 PM 60.61 19.19 41.41 339.39 7749.49
04:46:25 PM 5.05 5.05 0.00 40.40 0.00
Average: 275.76 9.09 266.67 134.68 15310.44
tps：每秒钟物理设备的 I/O 传输总量
rtps：每秒钟从物理设备读入的数据总量
wtps：每秒钟向物理设备写入的数据总量
bread/s：每秒钟从物理设备读入的数据量，单位为 块/s
bwrtn/s：每秒钟向物理设备写入的数据量，单位为 块/s
监控负载
sar -q 1 3
04:48:37 PM runq-sz plist-sz ldavg-1 ldavg-5 ldavg-15
04:48:38 PM 1 1475 0.01 0.05 0.12
04:48:39 PM 0 1475 0.01 0.05 0.12
04:48:40 PM 0 1475 0.01 0.05 0.12
Average: 0 1475 0.01 0.05 0.12
runq-sz：运行队列的长度（等待运行的进程数）
plist-sz：进程列表中进程（processes）和线程（threads）的数量
ldavg-1：最后1分钟的系统平均负载（System load average）
ldavg-5：过去5分钟的系统平均负载
ldavg-15：过去15分钟的系统平均负载
监控交互信息
sar -W 1 3
04:51:08 PM pswpin/s pswpout/s
04:51:09 PM 0.00 0.00
04:51:10 PM 0.00 0.00
04:51:11 PM 0.00 0.00
Average: 0.00 0.00
pswpin/s：每秒系统换入的交换页面（swap page）数量
pswpout/s：每秒系统换出的交换页面（swap page）数量
监控设备
04:52:13 PM DEV tps rd_sec/s wr_sec/s avgrq-sz avgqu-sz await svctm %util
04:52:14 PM dev8-0 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
04:52:14 PM dev8-1 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
04:52:14 PM dev8-2 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
04:52:14 PM dev8-3 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
04:52:14 PM dev8-4 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
参数-p可以打印出sda,hdc等磁盘设备名称,如果不用参数-p,设备节点则有可能是dev8-0,dev22-0
tps:每秒从物理磁盘I/O的次数.多个逻辑请求会被合并为一个I/O磁盘请求,一次传输的大小是不确定的.
rd_sec/s:每秒读扇区的次数.
wr_sec/s:每秒写扇区的次数.
avgrq-sz:平均每次设备I/O操作的数据大小(扇区).
avgqu-sz:磁盘请求队列的平均长度.
await:从请求磁盘操作到系统完成处理,每次请求的平均消耗时间,包括请求队列等待时间,单位是毫秒(1秒=1000毫秒).
svctm:系统处理每次请求的平均时间,不包括在请求队列中消耗的时间.
%util:I/O请求占CPU的百分比,比率越大,说明越饱和.
1. avgqu-sz 的值较低时，设备的利用率较高。
2. 当%util的值接近 100% 时，表示设备带宽已经占满。
监控网卡
sar -n { DEV | EDEV | NFS | NFSD | SOCK | ALL }
sar 提供六种不同的语法选项来显示网络信息。
-n选项使用6个不同的开关：DEV | EDEV | NFS | NFSD | SOCK | ALL 。
DEV显示网络接口信息，
EDEV显示关于网络错误的统计数据，
NFS统计活动的NFS客户端的信息，NFSD统计NFS服务器的信息，
SOCK显示套接字信息，
ALL显示所有5个开关。它们可以单独或者一起使用。
sar -n SOCK 1 3
04:56:15 PM totsck tcpsck udpsck rawsck ip-frag
04:56:16 PM 1540 1127 2 0 0
04:56:17 PM 1540 1128 2 0 0
04:56:18 PM 1541 1128 2 0 0
Average: 1540 1128 2 0 0
totsck:使用的套接字总数量
tcpsck:使用的TCP套接字数量
udpsck:使用的UDP套接字数量
rawsck:使用的raw套接字数量
ip-frag:使用的IP段数量
sar -n DEV 1 3
04:56:35 PM IFACE rxpck/s txpck/s rxbyt/s txbyt/s rxcmp/s txcmp/s rxmcst/s
04:56:36 PM lo 771.00 771.00 35754.00 35754.00 0.00 0.00 0.00
04:56:36 PM eth0 365.00 576.00 24878.00 34174.00 0.00 0.00 3.00
04:56:36 PM eth1 0.00 0.00 0.00 0.00 0.00 0.00 0.00
04:56:36 PM eth2 0.00 0.00 0.00 0.00 0.00 0.00 0.00
04:56:36 PM eth3 0.00 0.00 0.00 0.00 0.00 0.00 0.00
04:56:36 PM usb0 0.00 0.00 0.00 0.00 0.00 0.00 0.00
IFACE：LAN接口，网络设备的名称
rxpck/s：每秒钟接收的数据包
txpck/s：每秒钟发送的数据包
rxbyt/s：每秒钟接收的字节数
txbyt/s：每秒钟发送的字节数
rxcmp/s：每秒钟接收的压缩数据包
txcmp/s：每秒钟发送的压缩数据包
rxmcst/s：每秒钟接收的多播数据包
更多的
可以通过sar命令获取系统参数，做一个后台图表
参考:
http://blog.csdn.net/hguisu/article/details/7493661