linux系统监控集合 （私人备用）

  需要监控Linux服务器系统性能吗？尝试下面这些系统内置或附件的工具吧。大多数Linux发行版本都装备了大量的监控工具。这些工具提供了能用作取得相关信息和系统活动的量度指标。你能使用这些工具发现造成性能问题可能原因。此次讨论到的工具只是分析和调试服务器下面问题时最基本工具中的一部分。

1.找出瓶颈

2.硬盘（存储）瓶颈

3.CPU及内存瓶颈

4.网络瓶颈

#1: top - 进程活动

top提供一个当前运行系统实时动态的视图，也就是正在运行进程。在默认情况下，显示系统中CPU使用率最高的任务，并每5秒钟刷新一次。

常用热键

t显示摘要信息开关.m显示内存信息开关.A分类显示系统不同资源的使用大户。有助于快速识别系统中资源消耗多的任务。f添加删除所要显示栏位.o调整所要显示栏位的顺序.r调整一个正在运行的进程Nice值.k结束一个正在运行的进程.z彩色/黑白显示开关

#2:vmstat-系统活动、硬件及系统信息

使用vmstat命令可以得到关于进程、内存、内存分页、堵塞IO、traps及CPU活动的信息。

# vmstat 3

输出样例：

procs-----------memory---------- ---swap-- -----io---- --system-- -----cpu------ r bswpd free buff cache si so bi bo in cs us sy id wa st 0 0 0 2540988 5221885130400 0 0 2 32 4 2 4 1 96 0 0 1 0 0 2540988 522188 5130400 0 0 0 720 1199 6651 0 99 0 0 0 0 0 2540956 522188 5130400 0 0 0 0 1151 1569 4 1 95 0 0 0 0 02540956 522188 5130500 0 0 0 6 1117 439 1 0 99 0 0 0 0 0 2540940 522188 51305120 0 0 536 1189 932 1 0 98 0 0 0 0 0 2538444 522188 5130588 0 0 0 0 1187 1417 41 96 0 0 0 0 0 2490060 522188 5130640 0 0 0 18 1253 1123 5 1 94 0 0显示内存使用详细信息# vmstat -m显示内存活动/不活动的信息

# vmstat -a

相关链接：How do I find out Linux Resource utilization to detect systembottlenecks?

#3:w - 显示谁已登录，他们正在做什么？

w命令显示系统当前用户及其运行进程的信息。

# w username # w vivek

输出样例：

17:58:47 up 5 days, 20:28, 2users, load average: 0.36, 0.26, 0.24 USER TTY FROM LOGIN@ IDLE JCPU PCPU WHATroot pts/0 10.1.3.145 14:55 5.00s 0.04s 0.02s vim /etc/resolv.conf root pts/110.1.3.145 17:43 0.00s 0.03s 0.00s w

#4：uptime - 告诉系统已经运行了多久？

uptime命令过去只显示系统运行多久。现在，可以显示系统运行多久、当前有多少的用户登录、在过去的1，5，15分钟里平均负载时多少。

# uptime

输入样例：

18:02:41 up 41 days, 23:42, 1user, load average: 0.00, 0.00, 0.00

1可以被认为是最优的负载值。负载是会随着系统不同改变得。单CPU系统1-3和SMP系统6-10都是可能接受的。

#5：ps - 显示进程

ps命令显示当前运行进程的快照。使用-A或-e显示所有进程。

# ps -A

输出样例：

PID TTY TIME CMD 1 ? 00:00:02init 2 ? 00:00:02 migration/0 3 ? 00:00:01 ksoftirqd/0 4 ? 00:00:00 watchdog/05 ? 00:00:00 migration/1 6 ? 00:00:15 ksoftirqd/1 .... ..... 4881 ? 00:53:28java 4885 tty1 00:00:00 mingetty 4886 tty2 00:00:00 mingetty 4887 tty3 00:00:00mingetty 4888 tty4 00:00:00 mingetty 4891 tty5 00:00:00 mingetty 4892 tty600:00:00 mingetty 4893 ttyS1 00:00:00 agetty 12853 ? 00:00:00 cifsoplockd 12854? 00:00:00 cifsdnotifyd 14231 ? 00:10:34 lighttpd 14232 ? 00:00:00 php-cgi54981 pts/0 00:00:00 vim 55465 ? 00:00:00 php-cgi 55546 ? 00:00:00bind9-snmp-stat 55704 pts/1 00:00:00 psps与top非常相似，但ps提供更多的信息。输出长格式# ps -Al输出附加全格式（显示进程在执行时传入的参数）# ps -AlF显示进程结构

# ps -AlFH

在进程后显示线程

# ps -AlLm

打印服务器上所有进程

# ps ax # ps axu

打印进程树

# ps -ejH # ps axjf # pstree

打印安全信息

# ps -eoeuser,ruser,suser,fuser,f,comm,label # ps axZ # ps -eM

查看使用Vivek用户名运行的进程

# ps -U vivek -u vivek u

设置自定义输出格式

# ps -eopid,tid,class,rtprio,ni,pri,psr,pcpu,stat,wchan:14,comm # ps axostat,euid,ruid,tty,tpgid,sess,pgrp,ppid,pid,pcpu,comm # ps-eopid,tt,user,fname,tmout,f,wchan

只显示Lighttpd的进程ID

# ps -C lighttpd -o pid=

或者

# pgrep lighttpd

或者

# pgrep -u vivek php-cgi

显示PID为55977的进程名称

# ps -p 55977 -o comm=

找出消耗内存最多的前10名进程

# ps -auxf | sort -nr -k 4 |head -10

找出使用CPU最多的前10名进程

# ps -auxf | sort -nr -k 3 |head -10

#6:free- 内存使用情况

free命令显示系统中空闲的、已用的物理内存及swap内存,及被内核使用的buffer。

# free

输出样例：

total used free sharedbuffers cached Mem: 12302896 9739664 2563232 0 523124 5154740 -/+buffers/cache: 4061800 8241096 Swap: 1052248 0 1052248相关链接：Linux Find Out Virtual MemoryPAGESIZELinux Limit CPU Usage Per ProcessHow much RAM does my Ubuntu / FedoraLinux desktop PC have?

#7:iostat- CPU平均负载，硬盘活动

iostat命令可报告中央处理器（CPU）的统计信息，各种设备、分区及网络文件系统输入/输出的统计信息。

# iostat

输出样例：

Linux 2.6.18-128.1.14.el5(www03.nixcraft.in) 06/26/2009 avg-cpu: %user %nice %system %iowait %steal%idle 3.50 0.09 0.51 0.03 0.00 95.86 Device: tps Blk_read/s Blk_wrtn/s Blk_readBlk_wrtn sda 22.04 31.88 512.03 16193351 260102868 sda1 0.00 0.00 0.00 2166 180sda2 22.04 31.87 512.03 16189010 260102688 sda3 0.00 0.00 0.00 1615 0相关链接：Linux Track NFS Directory /Disk I/O Stats#8:sar - 搜集和报告系统活动 sar命令用来搜集、报告和储存系统活动信息。查看网路计数器，输入： # sar -n DEV | more 显示最近24小时网络计数器 # sar -n DEV -f /var/log/sa/sa24 | more 你亦可以用sar显示实时情况 # sar 4 5 输出样例： Linux 2.6.18-128.1.14.el5(www03.nixcraft.in)   06/26/2009 06:45:12PM       CPU    %user     %nice   %system  %iowait    %steal     %idle 06:45:16PM       all     2.00      0.00     0.22      0.00     0.00     97.78 06:45:20PM       all     2.07      0.00     0.38      0.03     0.00     97.52 06:45:24PM       all     0.94      0.00     0.28      0.00     0.00     98.78 06:45:28PM       all     1.56      0.00     0.22      0.00      0.00    98.22 06:45:32 PM      all      3.53     0.00      0.25     0.03      0.00     96.19Average:         all      2.02     0.00      0.27     0.01      0.00     97.70 相关链接：How to collect Linux systemutilization data into a file #9:mpstat - 多处理器使用率 mpstat命令可以显示所有可用处理器的使用情况，处理器编号从0开始。mpstat -P ALL显示每个处理器的平均使用率。 # mpstat -P ALL 输出样例： Linux 2.6.18-128.1.14.el5 (www03.nixcraft.in)  06/26/2009 06:48:11 PM CPU   %user  %nice    %sys %iowait    %irq   %soft%steal   %idle    intr/s 06:48:11 PMall    3.50    0.09   0.34    0.03    0.01   0.17    0.00   95.86   1218.04 06:48:11PM    0    3.44    0.08   0.31    0.02    0.00   0.12    0.00   96.04   1000.31 06:48:11PM    1    3.10   0.08    0.32    0.09   0.02    0.11    0.00  96.28     34.93 06:48:11 PM   2    4.16    0.11   0.36    0.02    0.00   0.11    0.00   95.25     0.00 06:48:11 PM    3    3.77   0.11    0.38    0.03   0.01    0.24    0.00  95.46     44.80 06:48:11 PM   4    2.96    0.07   0.29    0.04    0.02   0.10    0.00   96.52     25.9106:48:11 PM    5    3.26   0.08    0.28    0.03   0.01    0.10    0.00  96.23     14.98 06:48:11 PM   6    4.00    0.10   0.34    0.01    0.00   0.13    0.00   95.42     3.75 06:48:11 PM    7    3.30   0.11    0.39    0.03   0.01    0.46    0.00  95.69     76.89 相关链接：Linux display each multiple SMP CPU processors utilizationindividually. #10: pmap - 进程的内存使用 pmap命令可以显示进程的内存映射，使用这个命令可以找出造成内存瓶颈的原因。 # pmap -d PID 显示PID为47394进程的内存信息。 # pmap -d 47394 输出样例： 47394:  /usr/bin/php-cgi Address          Kbytes Mode Offset          Device    Mapping 0000000000400000    2584 r-x--0000000000000000 008:00002 php-cgi 0000000000886000     140rw--- 0000000000286000 008:00002 php-cgi00000000008a9000      52 rw--- 00000000008a9000000:00000   [ anon ] 0000000000aa8000     76 rw--- 00000000002a8000 008:00002 php-cgi 000000000f678000   1980 rw--- 000000000f678000 000:00000   [ anon ]000000314a600000     112 r-x-- 0000000000000000 008:00002ld-2.5.so 000000314a81b000       4 r----000000000001b000 008:00002 ld-2.5.so000000314a81c000       4 rw--- 000000000001c000008:00002 ld-2.5.so 000000314aa00000    1328 r-x--0000000000000000 008:00002 libc-2.5.so 000000314ab4c000    2048----- 000000000014c000 008:00002 libc-2.5.so ..... ...... .. 00002af8d48fd000      4 rw--- 0000000000006000 008:00002 xsl.so00002af8d490c000      40 r-x-- 0000000000000000008:00002 libnss_files-2.5.so 00002af8d4916000    2044 -----000000000000a000 008:00002 libnss_files-2.5.so00002af8d4b15000       4 r---- 0000000000009000008:00002 libnss_files-2.5.so00002af8d4b16000       4 rw--- 000000000000a000008:00002 libnss_files-2.5.so 00002af8d4b17000 768000 rw-s- 0000000000000000000:00009 zero (deleted) 00007fffc95fe000      84rw--- 00007ffffffea000 000:00000   [ stack ] ffffffffff600000   8192 ----- 0000000000000000 000:00000   [ anon ] mapped:933712K    writeable/private: 4304K    shared:768000K 最后一行非常重要： *mapped: 933712K 内存映射所占空间大小 * writeable/private: 4304K 私有地址空间大小 * shared: 768000K 共享地址空间大小相关链接：Linux find the memory used bya program / process using pmap command

#11和#12: netstat和ss - 网络相关信息

netstat可以显示网络链接、路由表信息、接口统计信息、伪装链接和多播成员(multicastmemberships),ss命令用来显示网络套接字信息，它允许显示类似netstat一样的信息。关于ss和netstat使用，可参考下列资源。

相关链接：

ss: Display Linux TCP / UDPNetwork and Socket InformationGet Detailed Information About Particular IPaddress Connections Using netstat Command

#13:iptraf - 网络实时信息

iptraf是一个可交互式的IP网络监控工具。它可以生成多种网络统计信息包括：TCP信息、UDP数量、ICMP和OSPF信息、以太网负载信息、节点状态、IP校验错误等。有下面几种信息格式：

不同网络TCP链接传输量不同网络接口IP传输量不同协议网络传输量不同TCP/UDP端口和不同包大小网络传输量不同第二层地址网络传输量

 图02：一般接口信息：不同网络接口IP传输量

 图03：不同网络TCP链接传输量

#14：tcpdump：详细的网络流量分析

tcpdump是一个简单网络流量转储工具，然而要使用好需要对TCP/IP协议非常熟悉。例如要显示关于DNS的网络流量，输入：

# tcpdump -i eth1 'udp port53'

显示所有进出80端口IPv4HTTP包，也就是只打印包含数据的包。例如：SYN、FIN包和ACK-only包输入：

# tcpdump 'tcp port 80 and(((ip[2:2] - ((ip[0]&0xf)<<2)) - ((tcp[12]&0xf0)>>2)) !=0)'

显示所有到的FTP会话，输入：

# tcpdump -i eth1 'dst202.54.1.5 and (port 21 or 20'

显示所有到192.168.1.5的HTTP会话

# tcpdump -ni eth0 'dst192.168.1.5 and tcp and port http'

用wireshark浏览转储文件中的详细信息，输入：

# tcpdump -n -i eth1 -s 0 -woutput.txt src or dst port 80

#15:strace- 系统调用

追踪系统调用和型号，这对于调试Web服务器和其他服务器非常有用。了解怎样追踪进程和他功能。

#16:/proc文件系统 - 各种内核信息

/proc目录下文件提供了很多不同硬件设备和内核的详细信息。更多详情参见Linuxkernel /proc。一般/proc例如：

# cat /proc/cpuinfo # cat/proc/meminfo # cat /proc/zoneinfo # cat /proc/mounts

#17:Nagios- 服务器及网络监控

Nagios 是一款非常流行的系统及网络监控软件。你可以轻松监控所有的主机、网络设备及服务。它能在发生故障和重新恢复后发送警讯。FAN是"FullyAutomated Nagios"的缩写。FAN的目标就是由Nagios社群提供Nagios的安装。为了使安装Nagios服务器更加容易，FAN提供一个标准ISO格式的光盘镜像。此发行版中还会包含一组增强用户使用体验的工具。

#18:Cacti- 基于Web的监控工具

Cacti是一套完成的网络图形化解决方案，基于RRDTool的资料存储和图形化功能。Cacti提供一个快速的轮询器、进阶的图形化模板、多种数据采集方法和用户管理功能。这些功能都拥有非常友好易用的界面，确保可以部署在一个包含数百台设备的复杂网络中。它提供关于网络、CPU、内存、已登录用户、Apache、DNS等信息。关于怎样在CentOS / RHEL安装配置Cacti，详见:http://www.cyberciti.biz/faq/fedora-rhel-install-cacti-monitoring-rrd-software/

#19:KDESystem Guard

KSysguard是在KDE桌面下一个网络化的系统监控工具。这个工具可以通过SSH会话运行。它提供很多功能，例如可以监控本机和远程主机的客户端/服务器架构，前端图形界面使用所谓传感器得到信息并展现出来。传感器返回的可以是一个简单的数值或是一组表格的信息。针对不同的信息类型，提供一个或多个显示。这些显示被组织多个工作表中，可以工作表可以独体储存和加载。所以，KSysguard不只是一个简单的任务管理器，还是一个可以控制多台服务器的强大工具。

 图05：KDE System Guard

详细用法参见： the KSysguard handbook

#20:GnomeSystem Monitor

System Monitor可以显示系统基本信息、监控系统进程、系统资源及文件系统使用率。你也可以使用System Monitor监控和修改系统行为。尽管没有KDE System Guard功能强大，但其提供的基本信息对于入门用户还是非常有用的。

* 显示关于计算机硬件和软件的各种基本信息。 *Linux内核版本 *GNOME版本 * 硬件 * 安装的内存 * 处理器及其速度 * 系统状态 * 当前可用的硬盘空间 * 进程 * 内存及交换空间 * 网络使用率 * 文件系统 * 所有挂载的文件系统及其基本信息

 图06：The Gnome System Monitorapplication

运维人员的基本具备工具

说到工具，在行外可以说是技能，在行内我们一般称为工具，就是运维必须要掌握的工具。

我就大概列出这几方面，这样入门就基本没问题了。

Linux系统如果是学习可以选用Redhat或CentOS，特别是CentOS在企业中用得最多，当然还会有其它版本的，但学习者还是以这2个版本学习就行，因为这两个版本都是兄弟，没区别的，有空可以再研究一下SUSE，有些公司也喜欢用。

工具如下：

1、Linux系统基础

这个不用说了，是基础中的基础，连这个都不会就别干了，参考书籍，可以看鸟哥linux基础篇，至少要掌握这书60%内容，没必须全部掌握，但基本命令总得会吧。

2、网络服务

服务有很多种，每间公司都会用到不同的，但基础的服务肯定要掌握，如FTP, DNS,SAMBA, 邮件, 这几个大概学一下就行，LAMP和LNMP是必须要熟练，我所指的不是光光会搭建，而是要很熟悉里面的相当配置才行，因为公司最关键的绝对是WEB服务器，所以nginx和apache要熟悉，特别是nginx一定要很熟悉才行，至少有些公司还会用tomcat，这个也最好学一下。其实网络服务方面不用太担心，一般公司的环境都已经搭建好，就算有新服务器或让你整改，公司会有相应的文档让你参照来弄，不会让你乱来的，但至少相关的配置一定要学熟，而且肯定是编译安装多，那些模块要熟悉一下他的作用，特别是PHP那些模块。

这上面2点只是基础，也是必要条件，不能说是工具，以下才是真正的要掌握的工具。

3、shell脚本和另一个脚本语言

shell是运维人员必须具备的，不懂这个连入职都不行，至少也要写出一些系统管理脚本，最简单也得写个监控CPU，内存比率的脚本吧，这是最最最基本了，别以为会写那些猜数字和计算什么数的，这些没什么作用，只作学习意义，写系统脚本才是最有意义，而另一个脚本语言是可选的，一般是3P，即python, perl和php，php就不需要考虑了，除非你要做开发，我个人建议学python会比较好，难实现自动化运维，perl是文本处理很强大，反正这两个学一个就行了。

4、sed和awk工具

必须要掌握，在掌握这两个工具同时，还要掌握正则表达式，这个就痛苦了，正则是最难学的表达式，但结合到sed和awk中会很强大，在处理文本内容和过滤WEB内容时十分有用，不过在学shell的同时一般会经常结合用到的，所以学第3点就会顺便学第4点。

5、文本处理命令

sort, tr, cut, paste, uniq, tee等，必学，也是结合第3点时一并学习的。

6、数据库

首选mysql，别问我为什么不学sqlserver和oracle，因为Linux用得最多绝对是mysql，增删改查必学，特别要学熟查，其它方面可能不太需要，因为运维人员使用最多还是查，哪些优化和开发语句不会让你弄的。

7、防火墙

不学不行，防火墙也算是个难点，说难不难，说易不易，最重要弄懂规则，如果学过CCNA的朋友可能会比较好学，因为iptables也有NAT表，原理是一样的，而FILTER表用得最多，反正不学就肯定不合格。

8、监控工具

十分十分重要，我个人建议，最好学这3个，cacti，nagios，zabbix，企业用得最多应该是nagios 和 zabbix，反正都学吧，但nagios会有点难，因为会涉及到用脚本写自动监控，那个地方很难。

9、集群和热备

这个很重要，肯定要懂的，但到了公司就不会让你去弄，因为新手基本不让你碰，集群工具有很多，最好学是LVS，这是必学，最好也学学nginx集群，反向代理，还有热备，这个就更多工具能实现了，像我公司是自己开发热备工具的，mysql热备也要学，就是主从复制，这个别告诉我容易，其实不容易的，要学懂整个流程一点也不容易，只照着做根本没意思。

10、数据备份

不学不行，工具有很多，但至少要把RAID的原理弄懂，特别是企业最常用的1+0或0+1，自己做实验也要弄出来，备份工具有很多，如tar, dump, rsync等，最好多了解一下。

算了，说到这10点已经够你受了，应该可以入门了，因为有些技术会比较难学，例如apache和nginx中还有些很重要的技术，如系统调优和服务优化，还有程序优化，这些在没接触工作前很难学习到的，所以先把这10点学了吧，估计要学熟至少3个月不止，就脚本那部分已经让你很吃力了，我建议是先学熟shell，等工作后再学另一门脚本语言，这样会比较好。

以上就是踏入Linux运维工程师需要掌握的工具，其实还有很多工具要掌握的，但你在学习环境中是很难学到，最后我再提醒一下，这里所指的工具相当于技能，而不是像windows或ubuntu那些图形化工具，那些工具没用的，还有，学Linux就别装图形界面，这样虚拟机就不用吃太多内存，而且绝对不建议在真机上装Linux，根本达不到学习效果。