系统监控工具

系统监控工具

top、free、vmstat、iostat、pmap、glances、dstat、iotop、lsof

1 命令top

动态监控系统状态 ，在命令行输入top，界面如下

• 格式：
  top [选项]
• 选项：
  -p：指定进程
  -b：全部显示所有进程
  -H ： 线程模式，示例：top -H -p 5155
  -n#：刷新多少次后退出
  -d#：指定刷新时间间隔，默认为3秒
• 执行界面

1. |top - 21:01:47 up 10:45,  4 users,  load average: 0.04, 0.03, 0.05|
   |命令uptime信息|
2. |Tasks: 259 total, |  1 running, |258 sleeping, |  0 stopped, |  0 zombie
   |  总进程数         |   活动进程   |   睡眠进程    |   停止进程  |  僵尸进程|
3. |%Cpu(s): | 0.1 us, | 0.2 sy, |       0.0 ni,        | 99.8 id,| 0.0 wa, | 0.0 hi, | 0.0 si, | 0.0 st|
   | cpu状态 |用户占用比例|内核占用|改变过ni优先级的进程占用| 空闲占比 |等待IO时间|  硬中断  |软终端|丢失的时间片|
4. |KiB Mem :  1514076 total, |   76768 free, |  791284 used, |  646024 buff/cache|
	|            总内存        |     剩余量    |     使用量     |用于缓存的量|
5. |KiB Swap:  3145724 total, | 3145724 free, |       0 used. |  503752 avail Mem |
   |        虚拟内存总量       |      空闲量    |     使用量    |缓冲的交换区总量|
   PID USER      PR  NI    VIRT    RES    SHR S  %CPU %MEM     TIME+ COMMAND                          
   742 root      20   0  320060   6536   5072 S   0.3  0.4   0:49.45 vmtoolsd  
1
2
3
4
5
6
7
8
9
10
11
12

• 首部信息显示隐藏开关

  1. uptime信息：开关 l
  2. tasks信息与cpu： 开关 t
  3. memory信息：开关 m
  4. cpu分别显示：（数字）1，显示所有核心信息
     st：丢失的时间片，系统识别虚拟机，但不会识别虚拟机中运行的，cpu会分配给虚拟机中一些进程用，就会产生未知时间片

• 排序：

  1. p：以占据的cpu百分比%cpu
  2. M：占据内存百分比，%MEM
  3. T：累计占据CPU时长，TIME+

• 管理指令：

  1. q：退出命令
  2. S：修改刷新时间间隔
  3. k：终止指定进程
  4. W： 保存至root/.toprc

####7.5.1 htop命令：EPEL源
与top命令相似，UI设计前卫一些

• 格式
  htop [选项]
• 选项：
  -d#：指定延迟时间
  -u UserName：仅显示指定用户的进程
  -s COLUME：以指定字段进行排序
• 子命令
  s：跟踪选定进程系统调用
  l：显示选定进程打开的文件列表
  a：将选定的进程绑定至某指定CPU核心
  t：显示进程树

2 内存空间管理

2.1 命令free

内存空间使用状态

• 格式：free[OPTION]

• 选项
  -b：以字节为单位
  -m：以MB为单位
  -g：以GB为单位
  -h：易读模式
  -t：显示RAM+swap的总和
  -s n：刷新间隔为n秒
  -c n：刷新n次后即退出

• 执行结果
  buffers，解决速度不匹配问题；cache缓存，提高访问速度的

  [v9@hai7 ~]$free
                total       used       free      shared     buffers     cached									             
  1：Mem:       1003020     887824     115196       4104      89252     428612
  2：-/+ buffers/cache:     369960     633060      
  3：Swap:      2097148       1076    2096072
  1
  2
  3
  4
  5

  1. 内存使用情况
  2. -/+ buffers/cach
     (-buffers/cache) used内存数： used – buffers – cached
     (+buffers/cache) free内存数 ：free + buffers + cached
  3. 虚拟内存信息

2.2 vmstat命令

虚拟内存信息

• 格式
  vmstat [options][delay[count]]

• 选项：
  -s：显示内存的统计数据

• 示例：
  vmstat 1 动态观察，1秒刷新一次
  vmstat 1 10 执行10次退出，1秒执行一次

• 执行结果说明

  vmstat -n
  |procs| |-----------memory--------| |-swap-| -|---io---|-|system ||-------cpu-----|
  	1                 2                 3          4        5              6
   r  b   swpd   free   buff  cache   si   so    bi    bo   in   cs  us sy id wa st
   0  0      0 107296  94720 442468    0    0     5     1   17   16  0  0 100  0  0	
  1
  2
  3
  4
  5

  1. procs:
     r:可运行（正运行或等待运行）进程的个数，和核心数有关
     b:处于不可中断睡眠态的进程个数（被阻塞的队列的长度）
  2. memory:
     swpd：交换内存的使用总量
     free: 空闲物理内存总量
     buffer：用于buffer的内存总量
     cache：用于cache的内存容量
  3. swap
     si：从磁盘交换进内存的数据速率（kb/s）
     so：从内存交换至磁盘的数据速率（kb/s）
  4. io：
     bi：从块设备读入数据到系统的速率（kb/s）
     bo：保存数据至块设备的速率
  5. system：
     in：interrupts终端速率，包括时钟
     cs：context switch 进程切换速率
  6. cpu：
     us：运行非内核代码的时间
     sy：运行内核代码的时间
     id：空闲时间.Linux2.5.41前，包括IO-wait time
     wa：I/O等待时间. 2.5.41前，包括in idle
     st：丢失时间.

2.3命令iostat

与vmstat使用方法相似，统计CPU和设备IO信息

• 格式
  iostat [选项] [-p [device…] [interval [count] ]
• 选项
  -c：仅显示CPU统计信息.与-d选项互斥.
  -d：仅显示磁盘统计信息.与-c选项互斥.
  -k：以K为单位显示每秒的磁盘请求数,默认单位块.
  -p：device | ALL 与-x选项互斥,用于显示块设备及系统分区的统计信息.
  -t：在输出数据时,打印搜集数据的时间.
  -V：打印版本号和帮助信息.
  -x ：输出扩展信息.
• 示例

示例1. 监控设备adv1的扩展数据，每秒刷新一次，执行10次

[v9@hai7 ~]$iostat -x -d sda1 1 10
Device:         rrqm/s   wrqm/s     r/s     w/s   rsec/s   wsec/s avgrq-sz avgqu-sz   await r_await w_await  svctm  %util
sda1              0.00     0.00    0.01    0.00     0.09     0.00     8.42     0.00    0.07    0.07    0.14   0.07   0.00
1
2
3

1. rrqm/s：每秒这个设备相关的读取请求有多少被合并了
2. rsec/s：每秒读取的扇区数
3. avgrq-sz：平均请求扇区的大小
4. avgqu-sz：是平均请求队列的长度，越短越好
5. await： I/O响应时间，一般低于5ms，await与svctm差值越小，则说明队列时间越短，反之差值越大，队列时间越长，说明系统出了问题。
6. svctm： 表示平均每次设备I/O操作的服务时间
7. %util： 在统计时间内所有处理IO时间，除以总共统计时间。例如，如果统计间隔1秒，该设备有0.8秒在处理IO，而0.2秒闲置，那么该设备的%util = 0.8/1 = 80%，所以该参数暗示了设备的繁忙程度

示例2. 以k为单位显示磁盘使用情况，每2秒刷新一次

[v9@hai7 ~]$iostat -d -k 2
1

示例3. 默认执行结果示例

[v9@hai7 ~]$iostat
1：Linux 2.6.32-754.el6.x86_64 (hai6) 	09/06/2018 	_x86_64_	(4 CPU)

2：avg-cpu: %user %nice %system %iowait %steal %idle
0.02 0.00 0.16 0.00 0.00 99.81

3：Device: tps Blk_read/s Blk_wrtn/s Blk_read Blk_wrtn
scd0 0.01 0.03 0.00 1540 0
sda 0.46 19.71 2.57 1047842 136528

• 1
• 2
• 3
• 4
• 5
• 6
• 7
• 8
• 9

1. 架构CPU信息
2. CPU信息
3. 块设备信息
   1. tps: 每秒钟发送到的I/O请求数.
   2. Blk_read /s: 每秒读取的block数.
   3. Blk_wrtn/s: 每秒写入的block数.
   4. Blk_read: 读入的block总数.
   5. Blk_wrtn: 写入的block总数.

2.4 命令pmap

进程对应的内存映射，与文件/proc/PID(进程编号)/maps类似

• 格式
  pmap [options] pid […]

• 选项
  -x：显示详细格式的信息

• 执行示例，查看进程7795的内存占用信息

  [v9@hai7 ~]$pmap -x 7795
  7795:   nano
  Address           Kbytes     RSS   Dirty Mode   Mapping
  0000000000400000     168     112       0 r-x--  nano
  0000000000629000       8       8       4 rw---  nano
  0000000001fd9000     528     468     468 rw---    [ anon ]
  ...               <==省略
  

[v9@hai7 ~]$cat /proc/7795/maps <==与pmap显示内容相似

• 1
• 2
• 3
• 4
• 5
• 6
• 7
• 8
• 9

1. RSS：真正占用空间
2. Dirty：脏数据，数据没有最终结束，处于中间状态

3. 命令glances

EPEL源，可以跨网络监控

• 格式
  glances [-bdehmnrsvyz1] [-B bind] [-c server] [-C conffile] [-p port] [-P password] [–password] [-t refresh] [-f file][-o output]

• 常用选项：

选项	含义
-b	以Byte为单位显示网卡数据速率
-d	关闭磁盘I/O模块
-f /path/to/somefile	设定输入文件位置
-o{HTML	CSV}
-m	输入格式
-n	禁用mount模块
-t	延迟时间间隔
-1	每个CPU的相关数据单独显示