1. 监控io性能

# iostat -x     查看磁盘使用

Linux 3.10.0-514.el7.x86_64 (ccj-01)     2018年1月23日     _x86_64_    (1 CPU)


avg-cpu:  %user   %nice %system %iowait  %steal   %idle

           0.05    0.00    0.11    0.00    0.00   99.84


Device:         rrqm/s   wrqm/s     r/s     w/s    rkB/s    wkB/s avgrq-sz avgqu-sz   await r_await w_await  svctm  %util

sda               0.00     0.00    0.03    0.03     1.17     0.53    60.11     0.00    3.50    2.43    4.69   0.91   0.01

sdb               0.00     0.00    0.00    0.00     0.01     0.00    12.35     0.00    0.07    0.07    0.00   0.05   0.00

scd0              0.00     0.00    0.00    0.00     0.00     0.00     8.00     0.00    2.09    2.09    0.00   2.00   0.00

dm-0              0.00     0.00    0.00    0.00     0.00     0.00    15.20     0.00    0.07    0.07    0.00   0.07   0.00

说明:%util这列就是表示磁盘io百分比,如果百分比很大,那就会导致读与写也很大,会影响磁盘性能。



iotop命令

#yum install -y iotop   安装


#iotop        查看磁盘io,动态显示:

Total DISK READ :   0.00 B/s | Total DISK WRITE :       0.00 B/s

Actual DISK READ:   0.00 B/s | Actual DISK WRITE:       0.00 B/s

   TID  PRIO  USER     DISK READ  DISK WRITE  SWAPIN     IO>    COMMAND                                                  

    21 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.38 % [kworker/0:1]

     1 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % systemd --switched-root --system --deserialize 21

     2 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [kthreadd]

     3 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [ksoftirqd/0]

 517 be/4 polkitd     0.00 B/s    0.00 B/s  0.00 %  0.00 % polkitd --no-debug [JS GC Helper]

 518 be/4 polkitd     0.00 B/s    0.00 B/s  0.00 %  0.00 % polkitd --no-debug [JS Sour~ Thread]

     7 rt/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [migration/0]

     8 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [rcu_bh]

     9 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [rcu_sched]

   10 rt/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [watchdog/0]

   12 be/0 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [khelper]

   13 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [kdevtmpfs]

   14 be/0 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [netns]

   15 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [khungtaskd]

   16 be/0 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [writeback]

   17 be/0 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [kintegrityd]

   18 be/0 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [bioset]

   19 be/0 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [kblockd]

   20 be/0 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [md]

 535 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % NetworkManager --no-daemon

   26 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [kswapd0]

   27 be/5 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [ksmd]

   28 be/7 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [khugepaged]

   29 be/4 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [fsnotify_mark]

   30 be/0 root        0.00 B/s    0.00 B/s  0.00 %  0.00 % [crypto]



2. free命令

free命令可以查看当前系统的总内存大小以及使用内存的情况。


# free

              total        used        free      shared  buff/cache   available

Mem:         999940      126608      541660        6808      331672      682536

Swap:       2097148           0     2097148

[root@aminglinux-01 ~]# free -m

              total        used        free      shared  buff/cache   available

Mem:            976         123         528           6         323         666

Swap:          2047           0        2047

[root@aminglinux-01 ~]# free -h

              total        used        free      shared  buff/cache   available

Mem:           976M        123M        528M        6.6M        323M        666M

Swap:          2.0G          0B        2.0G

[root@aminglinux-01 ~]# free -g

              total        used        free      shared  buff/cache   available

Mem:              0           0           0           0           0           0

Swap:             1           0           1


解释:

  1. total:内存总大小。

  2. used:真正使用的实际内存大小。

  3. free:剩余物理内存大小(没有被分配,纯剩余)

  4. shared:共享内存大小,不用关注它。

  5. buff/cache:分配给buffer和cache的内存总共有多大。buffer和cache都是一部分内存,内存的作用就是缓解CPU和IO(如,磁盘)的速度差距的,可以如下理解:

    数据经过CPU计算,即将要写入磁盘,这时用的内存为buffer。

    CPU要计算时,需要把数据从磁盘中读出来,临时先放到内存中,这部分内存就是cache。

  6. available:系统可使用内存有多大,它包含了free,同时还有buffert和cache这部分还未占用的内存。

  7. free命令可以加上-m和-g、-h选项(分别以MB或GB为单位)打印内存的使用状况


总结:

  1. 公式:total=used+free+buff/cache

  2. avaliable包含free和buffer/cache剩余部分




3. ps命令

#ps aux 或 #ps -elf都是查看系统进程命令


# ps aux    查看所有系统进程

USER        PID %CPU %MEM    VSZ   RSS TTY      STAT START   TIME COMMAND

root          1  0.0  0.6 128104  6708 ?        Ss   1月25   0:04 /usr/lib/systemd/systemd --switched-root --system --d

root          2  0.0  0.0      0     0 ?        S    1月23   0:00 [kthreadd]

root          3  0.0  0.0      0     0 ?        S    1月23   0:16 [ksoftirqd/0]

root          7  0.0  0.0      0     0 ?        S    1月23   0:00 [migration/0]

root          8  0.0  0.0      0     0 ?        S    1月23   0:00 [rcu_bh]

root          9  0.0  0.0      0     0 ?        R    1月23   1:41 [rcu_sched]

root         10  0.0  0.0      0     0 ?        S    1月23   0:04 [watchdog/0]

root         12  0.0  0.0      0     0 ?        S<   1月23   0:00 [khelper]

root         13  0.0  0.0      0     0 ?        S    1月23   0:00 [kdevtmpfs]

root         14  0.0  0.0      0     0 ?        S<   1月23   0:00 [netns]

root         15  0.0  0.0      0     0 ?        S    1月23   0:00 [khungtaskd]

root         16  0.0  0.0      0     0 ?        S<   1月23   0:00 [writeback]

root         17  0.0  0.0      0     0 ?        S<   1月23   0:00 [kintegrityd]

root         18  0.0  0.0      0     0 ?        S<   1月23   0:00 [bioset]

root         19  0.0  0.0      0     0 ?        S<   1月23   0:00 [kblockd]


# ps aux |grep nginx       查看nginx服务进程是否存在

root       5821  0.0  0.0 112676   976 pts/0    R+   19:33   0:00 grep --color=auto nginx


解释说明:

PID:表示进程的ID,在想要杀死进程的时候就有作用

命令 kill PID号 例子:#kill 1346


#ps aux |grep qmgr 会看到的该进程被杀掉了

在遇到一个不知道的进程(有可能是被***的进程),在杀死的时候,就需要先查看进程的PID号。


STAT:进程的状态。

D:不能中断的进程,通常为IO (正在等待IO资源的进程,类似于vmstat中的b)。

R(run): 正在运行的进程,其中包括了等待CPU时间片的进程。

S(sleep):已经中断的进程,同样情况下系统的大部分进程都是这个状态。

T:已经停止或者暂停的进程。如果我们正在运行一个命令,比如说sleep 10,我们按一下Ctrl+z暂停进程时,用ps命令查看就会显示T这个状态。

X:已经死掉的进程。

Z:僵尸进程。

<:高优先级进程。

N:低优先级进程。

s:主进程。

+:前台的进程,例如此时ps aux就是前台的进程。

l:多线程进程。



使用ps连同管理符一起使用,用来查看某个进程或者它的数量

# ps aux |grep -c sshd

3

# ps aux |grep sshd

root        867  0.0  0.1  82480  1372 ?        Ss   1月23   0:00 /usr/sbin/sshd

root       3542  0.0  0.5 143104  5180 ?        Ss   1月23   1:21 sshd: root@pts/0

root       5835  0.0  0.0 112676   976 pts/0    S+   19:47   0:00 grep --color=auto sshd

上例中的3不准确,需要减掉1,因为使用grep命令时,grep命令本身也算一个进程。



4. 查看网络状态

netstat命令用来打印网络连接状况、系统所开放端口、路由表等信息。


常用的命令:

#netstat          查看网络状态

#netstat -lnp   查看监听端口

#netstat -an    查看系统的网络连接状况

#netstat -lntp  只看出tcp的,不包含socket

#ss -an 和nestat异曲同工,也是查看网络状态


# netstat

Active Internet connections (w/o servers)

Proto Recv-Q Send-Q Local Address           Foreign Address         State      

tcp        0     52 aminglinux-01:ssh       192.168.4.84:51554      ESTABLISHED

udp       0      0 aminglinux-01:41402    leontp.ccgs.wa.edu.:ntp ESTABLISHED

Active UNIX domain sockets (w/o servers)

Proto RefCnt Flags       Type       State         I-Node   Path

unix  2      [ ]         DGRAM                    12652    /run/systemd/shutdownd

unix  2      [ ]         DGRAM                    8332     /run/systemd/notify

unix  2      [ ]         DGRAM                    8334     /run/systemd/cgroups-agent

unix  5      [ ]         DGRAM                    8355     /run/systemd/journal/socket

unix  12    [ ]         DGRAM                    8357     /dev/log

unix  3      [ ]         STREAM     CONNECTED     15304    /var/run/dbus/system_bus_socket

unix  2      [ ]         DGRAM                    15259    

unix  3      [ ]         DGRAM                    13529    

unix  2      [ ]         DGRAM                    367481   

unix  2      [ ]         DGRAM                    19035    

unix  3      [ ]         STREAM     CONNECTED     15199    /run/systemd/journal/stdout

unix  3      [ ]         STREAM     CONNECTED     19144    

unix  2      [ ]         DGRAM                    13508    

....省略


# netstat -lnp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    

tcp         0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      867/sshd            

tcp         0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      1277/master         

tcp6       0      0 :::22                   :::*                    LISTEN      867/sshd            

tcp6       0      0 ::1:25                  :::*                    LISTEN      1277/master         

udp        0      0 127.0.0.1:323           0.0.0.0:*                           503/chronyd         

udp6      0      0 ::1:323                 :::*                                503/chronyd         

raw6      0      0 :::58                   :::*                    7           535/NetworkManager  

Active UNIX domain sockets (only servers)

Proto RefCnt Flags       Type       State         I-Node   PID/Program name     Path

unix  2      [ ACC ]     STREAM     LISTENING     14863    1/systemd            /var/run/dbus/system_bus_socket

unix  2      [ ACC ]     STREAM     LISTENING     19087    1277/master          private/rewrite

unix  2      [ ACC ]     STREAM     LISTENING     19090    1277/master          private/bounce

unix  2      [ ACC ]     STREAM     LISTENING     19084    1277/master          private/tlsmgr

unix  2      [ ACC ]     STREAM     LISTENING     19094    1277/master          private/defer

unix  2      [ ACC ]     STREAM     LISTENING     19097    1277/master          private/trace

unix  2      [ ACC ]     STREAM     LISTENING     19100    1277/master          private/verify

unix  2      [ ACC ]     STREAM     LISTENING     19106    1277/master          private/proxymap

unix  2      [ ACC ]     STREAM     LISTENING     19109    1277/master          private/proxywrite

unix  2      [ ACC ]     STREAM     LISTENING     19112    1277/master          private/smtp

.....省略


# netstat -lntp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    

tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      867/sshd            

tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      1277/master         

tcp6      0      0 :::22                   :::*                    LISTEN      867/sshd            

tcp6      0      0 ::1:25                  :::*                    LISTEN      1277/master  

# ss -an

Netid State      Recv-Q Send-Q             Local Address:Port                            Peer Address:Port              

nl    UNCONN     0      0                              0:0                                           *                   

nl    UNCONN     0      0                              0:-46136809                                   *                   

nl    UNCONN     0      0                              0:-46136809                                   *                   

nl    UNCONN   768    0                              4:0                                           *                   

nl    UNCONN  4352   0                              4:5885                                        *                   

nl    UNCONN     0      0                              6:0                                           *                   

nl    UNCONN     0      0                              7:1                                           *                   

nl    UNCONN     0      0                              7:500                                         *                   

nl    UNCONN     0      0                              7:0                                           *                   

nl    UNCONN     0      0                              7:500                                         *                   

nl    UNCONN     0      0                              7:1                                           *          


小技巧:

可以查看所有状态的数字,使用命令:netstat -an | awk '/^tcp/ {++sta[$NF]} END {for(key in sta) print key,"\t",sta[key]}'


示例命令如下:

# netstat -an | awk '/^tcp/ {++sta[$NF]} END {for(key in sta) print key,"\t",sta[key]}'

LISTEN   4

ESTABLISHED      1

备注:如果你管理是一台提供Web服务(80端口)的服务器,那么就可以使用命令netstat -an |grep 80来查看当前连接Web服务的有哪些IP。



5. linux下抓包


tcpdump工具

#yum install -y tcpdump   安装

用法:#tcpdump -nn -i ens33


只关注第3-4列,显示为哪一个IP地址+端口号在连接哪一个IP+端口号。

-i表示网卡,后面跟的ens33是网卡名称,如果想抓取其他网卡上的数据包,后面则要跟其他网卡的名字。

-nn选项的作用是让第三列和第四列显示成“ip+端口号”的形式,如果不加-nn选项则显示“主机名+服务名称”。



# tcpdump -nn    由于网卡关系找不到

tcpdump: packet printing is not supported for link type NFLOG: use -w

# ifconfig  查看网卡

# tcpdump -nn -i ens33   正确用法

20:19:58.421641 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 158748:158928, ack 1, win 340, length 180

20:19:58.422758 IP 192.168.4.84.51554 > 192.168.1.185.22: Flags [.], ack 158928, win 25374, length 0

20:19:58.425049 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 158928:159204, ack 1, win 340, length 276

20:19:58.426438 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 159204:159384, ack 1, win 340, length 180

20:19:58.426978 IP 192.168.4.84.51554 > 192.168.1.185.22: Flags [.], ack 159384, win 25260, length 0

20:19:58.427349 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 159384:159660, ack 1, win 340, length 276

20:19:58.427693 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 159660:159840, ack 1, win 340, length 180

20:19:58.428668 IP 192.168.4.84.51554 > 192.168.1.185.22: Flags [.], ack 159840, win 25146, length 0

20:19:58.428879 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 159840:160116, ack 1, win 340, length 276

20:19:58.429372 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 160116:160296, ack 1, win 340, length 180

20:19:58.429621 IP 192.168.4.84.51554 > 192.168.1.185.22: Flags [.], ack 160296, win 25032, length 0

20:19:58.429787 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 160296:160572, ack 1, win 340, length 276

20:19:58.430281 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 160572:160752, ack 1, win 340, length 180

20:19:58.430596 IP 192.168.4.84.51554 > 192.168.1.185.22: Flags [.], ack 160752, win 24918, length 0

20:19:58.432366 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 160752:161028, ack 1, win 340, length 276

20:19:58.432823 IP 192.168.1.185.22 > 192.168.4.84.51554: Flags [P.], seq 161028:161208, ack 1, win 340, length 180

...省略



其它用法:

#tcpdump -nn -i ens33 -c 100           -c作用是指定抓包数量,抓够了就自动退出,不用人为取消。

#tcpdump -nn -i ens33 port 80          指定只抓80端口的包

#tcpdump -nn -i ens33 not port 22    不要22端口的包

#tcpdump -nn -i ens33 tcp and not port 22    指定抓tcp的包,但是不要22端口的

#tcpdump -nn -i ens33 port 22 and port 53    只抓22和53端口的包

#tcpdump -nn -i ens33 not port 22 and host 192.168.0.100   只要这个ip的包

#tcpdump -nn -c 100 -w /tmp/12.cap    指定打印数据包条数,然后存储到指定文件里。

#tcpdump -r /tmp/12.cap                      12.cap是二进制数据包,不是文本,所以不能cat,应该用这种方式读取。



wireshark工具

#yum install -y wireshark  安装


下面这条命令可以查看指定网卡80端口的一个web访问的情况,如果服务器没有提供web服务,没有任何的80端口在监听,就无法显示效果。

#tshark -n -t a -R http.request -T fields -e "frame.time" -e "ip.src" -e "http.host" -e "http.request.method" -e "http.request.uri"