linux日志分析

一、日志系统

  1、日志系统：syslog()

            syslogd: 系统进程的相关日志

   klogd: 内核事件相关的日志

   2、日志需要滚动(日志切割)：以免日志文件过大，不便于分析：

        messages  messages.1  messages.2  messages.3

   3、logrotate日志滚动

        /etc/cron.daily/logrotate 日志滚动任务

        /etc/logrotate.conf 日志滚动配置文件

        /etc/logrotate.d 下是所有日志子系统的配置文件

  4、进入/sbin/init后的日志文件： 

        /var/log/messages: 系统标准错误日志信息；非内核产生引导信息；各子系统产生的信息；

        /var/log/maillog: 邮件系统产生的日志信息；

        /var/log/secure: 600权限，系统安全日志；

    5、syslog服务：

        a)syslogd: 系统，记录非内核产生的日志信息

        b)klogd：内核，专门负责记录内核产生的日志信息

        c)service syslog start 

        d)service syslog reload 不需要重启syslog服务，即可读取syslog配置信息；

   6、查看日志命令：

        dmesg /var/log/dmesg

        cat /var/log/dmesg    

二、文件常用分类格式

    1、配置文件：/etc/syslog.conf：

    2、配置文件定义格式为: facility.priority        action 

        a)facility,可以理解为日志的来源或设备目前常用的facility有以下几种： 

            auth      # 认证相关的 

            authpriv  # 权限,授权相关的 

            cron      # 任务计划相关的 

            daemon    # 守护进程相关的 

            kern      # 内核相关的 

            lpr       # 打印相关的 

            mail      # 邮件相关的 

            mark      # 标记相关的 

            news      # 新闻相关的 

            security  # 安全相关的,与auth类似  

            syslog    # syslog自己的 

            user      # 用户相关的 

            uucp      # unix to unix cp 相关的 

            local0 到 local7 # 用户自定义使用 

            *        # *表示所有的facility 

         b)priority(log level)日志的级别,一般有以下几种级别(从低到高，越低记录越详细) 

            debug           # 程序或系统的调试信息 

            info            # 一般信息

            notice          # 不影响正常功能,需要注意的消息 

            warning/warn    # 可能影响系统功能,需要提醒用户的重要事件 

            err/error       # 错误信息 

            crit            # 比较严重的 

            alert           # 必须马上处理的 

            emerg/panic     # 会导致系统不可用的 

            *               # 表示所有的日志级别 

            none            # 跟* 相反,表示啥也没有    

         c)action(动作)日志记录的位置 

            系统上的绝对路径    # 普通文件 如： /var/log/xxx 

            |                   # 管道  通过管道送给其他的命令处理 

            终端                # 终端   如：/dev/console 

            @HOST               # 远程主机 如： @192.168.1.1     

            用户                # 系统用户 如： root 

            *                   # 登录到系统上的所有用户，一般emerg级别的日志是这样定义的 

    3、定义格式例子： 

        mail.info   /var/log/mail.log # 表示将mail子系统相关的,级别为info的及info以上级别的信息记录到/var/log/mail.log文件中 

        auth.=info  @192.168.1.1        # 表示将auth相关的,级别为info的信息记录到192.168.1.1主机上去，前提是192.168.1.1要能接收其他主机发来的日志信息 

        user.!=error                  # 表示记录user相关的,不包括error级别的信息 

        user.!error                   # 与user.error相反 

        *.info                        # 表示记录所有的日志信息的info级别 

        mail.*                        # 表示记录mail相关的所有级别的信息 

        cron.info;mail.info           # 多个日志来源可以用";" 隔开 

        cron,mail.info                # 与cron.info;mail.info 是一个意思 

        mail.*;mail.!=info            # 表示记录mail相关的所有级别的信息,但是不包括info级别的 

    4、如何配置远程日志服务器

        a)修改配置文件：/etc/sysconfig/syslog

            SYSLOGD OPTIONS="-r -m 0"

        b)客户端修改：/etc/syslog.conf

            mail.*@IPADD

三、启用日志服务器功能

            利用本机（192.168.1.134）监听其他主机日志（192.168.1.132）   

 1、修改配置文件

            [root@90sec ~]# vim /etc/rsyslog.conf

 

2、修改192.168.1.132配置文件

    [root@90sec ~]# vim /etc/rsyslog.conf 

重启服务

                [root@90sec ~]# service rsyslog restart

3、测试    

        本机安装

                [root@90sec ~]# yum install -y zsh    

查看

    接收日志服务器查看

四、配置将rsyslog日志存储于MySQL服务器中：

    1、安装mysql及相关rsyslog相关包

        [root@90sec ~]# yum -y install mysql-server rsyslog-mysql

        [root@90sec ~]# service mysqld start

   2、修改配置文件

             [root@90sec ~]# vim /etc/rsyslog.conf

3、修改数据库并授权

            将库导入数据库

            [root@90sec ~]# mysql < /usr/share/doc/rsyslog-mysql-5.8.10/createDB.sql

       重启服务                          [root@90sec ~]# service rsyslog restart

4、测试

        192.168.1.132安装

            [root@90sec ~]# yum install -y tree

    在服务器查看

        

五、通过webGUI展示日志信息

        1、yum安装lamp平台

                [root@90sec ~]# yum -y install httpd php php-mysql php-gd rsyslog-mysql

        2、开启httpd服务并测试

               [ root@90sec ~]# service httpd restart

                [root@90sec ~]# vim /var/www/html/index.php

                      

                    phpinfo();

            ?>

~      

3、安装loganalyzer

        [root@90sec src]# tar xf loganalyzer-3.6.5.tar.gz 

        [root@90sec src]# mkdir /var/www/html/loganalyzer

        [root@90sec src]# mv loganalyzer-3.6.5/src/* /var/www/html/loganalyzer/

        [root@90sec src]# mv loganalyzer-3.6.5/contrib/* /var/www/html/loganalyzer/

        [root@90sec src]# cd /var/www/html/loganalyzer/

        [root@90sec loganalyzer]# chmod +x configure.sh secure.sh 

        [root@90sec loganalyzer]# ./configure.sh 

        [root@90sec loganalyzer]# ./secure.sh 

        [root@90sec loganalyzer]# chmod 666 config.php 

        [root@90sec loganalyzer]# chown -R apache:apache ./*

4、网页测试查看

                                                                                                

~         详细配置参加官方配置文档