Linux运维常用性能监控和调试工具

1 nagios

Nagios是一个开源监控解决方案，我觉得他可以监控一切 ，可以看一下我以前的文章：NAGIOS

2 ps#用来查看程序的运行情况

ps -ef |grep svr.py|grep -v grep |awk '{print $2}'#查看svr.py的进程pid号
14554

dongwm@linux-b8lh:~> ps -e -o pid,args --forest #层次结构中的进程ID

3 free#查看系统的物理（RAM）和交换内存的信息
dongwm@linux-b8lh:~> free -mto #MB值显示，显示总计
total used free shared buffers cached
Mem: 3196 2947 249 0 264 1436
Swap: 2053 88 1965
Total: 5250 3035 2215
4 top#显示所有正在运行的进程的信息，类似于windows的资源管理器 详细的清参看：关于top命令的研究
5 pmap #显示一个给定的进程的内存映射

dongwm@linux-b8lh:~> pmap 14443
14443: bash
START SIZE RSS PSS DIRTY SWAP PERM MAPPING
08048000 580K 476K 74K 0K 0K r-xp /bin/bash
080d9000 4K 4K 4K 4K 0K r--p /bin/bash
080da000 8K 8K 8K 8K 0K rw-p /bin/bash
080dc000 1076K 976K 976K 976K 0K rw-p [heap]
b744c000 8K 8K 8K 8K 0K rw-p [anon]
b744e000 252K 32K 6K 0K 0K r--p/usr/lib/locale/zh_CN.utf8/LC_CTYPE
b748d000 1344K 24K 2K 0K 0K r--p/usr/lib/locale/zh_CN.utf8/LC_COLLATE

6 nestat#显示各种网络相关信息，如网络连接，路由表，接口统计等,这个很常用，比如判断某程序的端口是否在监听

dongwm@linux-b8lh:~> sudo /bin/netstat -ap |grep ssh #-a 表示所有端口－p显示pid
root's password:
tcp 0 0 linux-b8lh.site:59073 mta1:61002 ESTABLISHED29323/ssh
tcp 0 0 linux-b8lh.site:35252 10.14.22.26:61300 ESTABLISHED11986/ssh
tcp 0 0 linux-b8lh.site:57146 mta1:61002 ESTABLISHED9138/ssh
tcp 0 0 linux-b8lh.site:32997 10.14.22.26:61300 ESTABLISHED15122/ssh
tcp 0 0 linux-b8lh.site:45807 10.14.22.26:61300 ESTABLISHED29240/ssh
tcp 0 0 linux-b8lh.site:35865 mta1:61002 ESTABLISHED28751/ssh
unix 2 [ ACC ] STREAM LISTENING 13182 2929/gnome-keyring-/tmp/keyring-TMukPL/ssh
unix 3 [ ] STREAM CONNECTED 607118 29323/ssh
unix 3 [ ] STREAM CONNECTED 607117 29326/sshfs
unix 3 [ ] STREAM CONNECTED 608427 29240/ssh
unix 3 [ ] STREAM CONNECTED 608426 29244/sshfs

dongwm@linux-b8lh:~>sudo /bin/netstat -tunlp|grep name ＃我常用的命令
Proto Recv-Q Send-Q Local Address Foreign Address State PID/Programname
tcp 0 0 172.16.180.1:53 0.0.0.0:* LISTEN 5160/named
tcp 0 0 172.16.110.1:53 0.0.0.0:* LISTEN 5160/named
tcp 0 0 192.168.8.46:53 0.0.0.0:* LISTEN 5160/named
tcp 0 0 127.0.0.2:53 0.0.0.0:* LISTEN 5160/named
tcp 0 0 127.0.0.1:53 0.0.0.0:* LISTEN 5160/named
tcp 0 0 127.0.0.1:953 0.0.0.0:* LISTEN 5160/named
udp 0 0 172.16.180.1:53 0.0.0.0:* 5160/named
udp 0 0 172.16.110.1:53 0.0.0.0:* 5160/named
udp 0 0 192.168.8.46:53 0.0.0.0:* 5160/named
udp 0 0 127.0.0.2:53 0.0.0.0:* 5160/named
udp 0 0 127.0.0.1:53 0.0.0.0:*

dongwm@linux-b8lh:~> netstat -r #显示路由信息类似于'route-n'的输出
Kernel IP routing table
Destination Gateway Genmask Flags MSS Window irtt Iface
172.16.180.0 * 255.255.255.0 U 0 0 0 vmnet8
172.16.110.0 * 255.255.255.0 U 0 0 0 vmnet1
192.168.8.0 * 255.255.255.0 U 0 0 0 eth3
link-local * 255.255.0.0 U 0 0 0 eth3
loopback * 255.0.0.0 U 0 0 0 lo
default 192.168.8.254 0.0.0.0 UG 0 0 0 eth3
7 IPTraf

dongwm@linux-b8lh:~> sudo zypper install iptraf

网络流量实时监控工具，可以监控所有的流量,IP流量,按协议分的流量,还可以设置过滤器等

启动需要root权限，一个图形化的工具，可以抓包，报告网卡流量情况，网卡数据包个数等，我也比较喜欢它来判断一些网络问题

8 htop

dongwm@linux-b8lh:~> sudo zypper install htop

彩色字体的top ，支持鼠标点击，对cpu使用情况。内存使用情况，当前负载情况等都直接显示，替代了top

9 dstat

dongwm@linux-b8lh:~> sudo zypper install dstat

#彩色字体的vmstat

dongwm@linux-b8lh:~> dstat -a
----total-cpu-usage---- -dsk/total- -net/total- ---paging-----system--
usr sys idl wai hiq siq| read writ| recv send| in out | intcsw
25 2 72 0 0 0| 43k 75k| 0 0 | 107B 839B|2066 7231
25 2 72 0 0 0| 0 40k|1328B 0 | 0 0 |2029 6175
27 2 70 1 0 0| 0 20k|2245B 1231B| 0 0 |2191 6545
28 1 70 0 0 0| 0 0 |1610B 0 | 0 0 |2243 6815
25 2 72 0 0 0| 0 104k|1224B 0 | 0 0 |2075 6610

10 Strace #i like it用于调试和故障排除Linux环境下的可执行文件的执行。 它显示了系统调用的进程所使用的过程中收到的信号,常用 ＊2不会这个基本不要作运维了

＃strace + 可执行程序

注：想要特定一个系统调用 使用‘-e’

11 lsof#卸载移动存储时经常提示device busy，也可能误删了一个正在打开的文件,lsof（list openfiles）是一个列出当前系统打开文件的工具.应用程序打开文件的描述符列表提供了大量关于这个应用程序本身的信息，因此通过lsof工具能够查看这个列表有助于系统监测以及排错

dongwm@linux-b8lh:~> lsof -a -u dongwm -d txt#查看所属root用户进程所打开的文件类型为txt的文件
dongwm@linux-b8lh:~> lsof /home#在卸载文件系统时，如果该文件系统中有任何打开的文件，操作通常将会失败。那么通过lsof可以找出那些进程在使用当前要卸载的文件系统

WebQQ\xe5 24090 dongwm 2u REG 8,7 7247256 12320783/home/dongwm/.xsession-errors
notificat 27261 dongwm mem REG 8,7 1512 12982245/home/dongwm/.local/share/mime/mime.cache
bluefish 29204 dongwm cwd DIR 8,7 12288 12320769/home/dongwm
bluefish 29204 dongwm DEL REG 8,7 12321855/home/dongwm/.local/share/gvfs-metadata/home-4be5293d.log
bluefish 29204 dongwm DEL REG 8,7 12320866/home/dongwm/.local/share/gvfs-metadata/home

恢复文件：当系统中的某个文件被意外地删除了，只要这个时候系统中还有进程正在访问该文件，那么我们就可以通过lsof从/proc目录下恢复该文件的内容。思路就是lsof|grep 这个删除了的文件，如果输出了项，记住pid 和第4列的“数字＋字母”其中的数字，然后， cat/proc/那个pid/fd/那个数字 > 删掉的文件 就恢复了

12 w＃查看当前登录系统的用户

13 uptime#查看当前负载的命令

dongwm@linux-b8lh:~> uptime
17:52 已启动1 天 8:41，6 个用户，平均负载：0.42, 0.26, 0.24
14 vnstat#用来统计网络流量

dongwm@linux-b8lh:~> sudo zypper install vnstat

vnstati -i eth0 – -months – -output /dir/month.png＃每月的流量统计图，做成定时任务＋html显示就更OK了

dongwm@linux-b8lh:~> sudo vnstat-create-db eth0
root's password:
Error: Unable to read database "/var/lib/vnstat/eth0".
Info: -> A new database has been created.
dongwm@linux-b8lh:~> vnstat --top10 #创建数据库信息，查看流量前10

15 ss #socket流量状态情况,我喜欢

dongwm@linux-b8lh:~> sudo /usr/sbin/ss -o state established#查看建立连接的socket
Recv-Q Send-Q Local Address:Port Peer Address:Port
0 0 192.168.8.46:59073 60.2.235.195:61002timer:(keepalive,60min,0)
0 0 192.168.8.46:52996 112.95.243.28:http
0 0 192.168.8.46:51066 128.121.22.144:http
0 0 192.168.8.46:38547 112.95.240.222:http
0 0 192.168.8.46:49295 74.125.71.154:http
0 0 192.168.8.46:46500 10.14.22.26:61300timer:(keepalive,48min,0)

dongwm@linux-b8lh:~> sudo /usr/sbin/ss -l ＃显示所有的监听套接字
Recv-Q Send-Q Local Address:Port Peer Address:Port
0 3 172.16.180.1:domain *:*
0 3 172.16.110.1:domain *:*
0 3 192.168.8.46:domain *:*
0 3 127.0.0.2:domain *:*
0 3 127.0.0.1:domain *:*
0 128 127.0.0.1:ipp *:*
0 128 ::1:ipp :::*
0 128 127.0.0.1:953 *:*
0 50 *:mysql *:*
0 128 :::sunrpc :::*
0 128 *:sunrpc *:*
0 128 :::http

dongwm@linux-b8lh:~> sudo /usr/sbin/ss -s#显示根据类型划分的总数值统计
Total: 719 (kernel 769)
TCP: 62 (estab 5, closed 16, orphaned 4, synrecv 0, timewait 2/0),ports 42

Transport Total IP IPv6
* 769 - -
RAW 1 1 0
UDP 12 10 2
TCP 46 43 3
INET 59 54 5
FRAG 0 0 0