linux shell脚本监控tomcat OOM

testOOM1.sh

#!/bin/sh
tomcatDir='/home/XXX/YYY/apache-tomcat-7.0.70/'
tomcatLog='logs/catalina.out'
tomcatLogTemp='logs/catalina_temp.out'

echo "testOOM1.sh 启动 $tomcatDir$tomcatLog"
if [ ! -f "$tomcatDir$tomcatLogTemp" ];then
echo "new create"
 touch "$tomcatDir$tomcatLogTemp"
fi
echo "tomcatLogTemp :  $tomcatDir$tomcatLogTemp"
tail -f -s 5 "$tomcatDir$tomcatLog" | grep --line-buffer '^java.lang.OutOfMemoryError:*'  > "$tomcatDir$tomcatLogTemp" &

该脚本用于将catalina.out的指定以java.lang.OutOfMemoryError:开头的内容 重定向到指定文件中

tail命令注意 -f 循环输出 -s 指定多久打印一次  单位秒

其中 tail -f 多次grep过滤输出可能会出现的问题 内容不能及时输出到文件中 需要使用 --line-buffer 属性

 

1. 查看日志文件最后200行

tail -200 日志文件（打印出日志文件的最后200条信息）

tail -f -n 200 日志文件  （实时打印最新的日志信息）

tail -200 n 日志文件(实时打印最新的日志信息)

tail -n +200 日志文件（从第200 行开始显示日志信息）

 

2. 查看日志文件的前200行

head -n 200 日志文件

 

3. 查看日志文件的中间指定行

cat 日志文件 |  head -n 200 | tail -n + 101

 

4. grep过滤文件内容并打印

grep 443文件 （查看文件中中含有8080字段的行）

grep -n 443文件（确定8080字段在文件中的行数）

grep -n -i "nginx" 文件 （确定ggpush在文件中的行数并且忽略大小写）

grep 'mapper' *.cnf （匹配当前目录下所有后缀为cnf文件含有过滤字段的内容）

 

5. 过滤掉指定的日志信息

grep -v '关键字'

 

6. 查看日志文件中带有指定关键词的日志信息

tail -f  文件名 | grep 关键字 | grep 关键字

 

7. tail -f 多次grep过滤输出可能会出现的问题

对日志记录做多次grep过滤输出，格式如下：
tail -f log | grep xxx | grep yyy
发现grep失效，无法做正确输出。google研究了一下，原因如下：
管道 | 是全缓冲的，一般来说buffer_size为4096，有些是8192。不管具体值多少，只有buffer_size满了，才会看到输出。
在操作里  >>file 这个操作也是全缓冲的。调整如下
tail -f log | grep --line-buffer xxx | grep --line-buffer yyy
结果输出正常。
grep当带上了 --line-buffer 的时候，每输出一行，就刷新一次。
在unix里，块设备和普通文件，以及管道都是全缓冲的。

对日志分析告警和实时监控可以考虑如下形式：

tail -f $LOGF | while read var
do
case "$var" in
...
...
esac
done

 

 

testOOM.sh

#!/bin/sh
tomcatDir='/home/XXX/YYY/apache-tomcat-7.0.70/'
tomcatLog='logs/catalina.out'
tomcatLogTemp='logs/catalina_temp.out'
shOMM='/home/liuhua/testOOM1.sh'

ps -ef  | grep 'tail -f -s 5'| grep -v 'grep'|awk '{print $2}'|xargs kill -9
sleep 2

"$shOMM"
echo "tomcatLog : "$tomcatDir$tomcatLog
while true
do
 sleep 10
  exceptionTemp=`tail -n 1 $tomcatDir$tomcatLogTemp`
  #echo "get exceptionTemp value : "$exceptionTemp
  if [ -n "$exceptionTemp" ] ;then
  echo "stopped start"
   pid=`ps -ef  | grep ${tomcatDir}| grep -v 'grep' | grep -v 'tail -f -s 5'|awk '{print $2}'`
   echo "当前tomcat pid : $pid"
   if [ -n "$pid" ] ; then
    #${tomcatDir}/bin/shutdown.sh
    ps -ef  | grep ${tomcatDir}| grep -v 'grep'|grep -v 'tail -f -s 5'|awk '{print $2}'|xargs kill -9
   fi
    echo "stopped ${tomcatDir} end"
   sleep 50
   pid=`ps -ef  | grep ${tomcatDir}| grep -v 'grep'|grep -v 'tail -f -s 5'|awk '{print $2}'`
   echo "是否已经启动了tomcat 其pid : $pid"
   if [ -z "$pid" ] ; then
     echo "启动tomcat"
     ${tomcatDir}/bin/startup.sh
    else echo "tomcat 已经启动"
   fi
   sleep 1
   varpid=`ps -ef  | grep 'tail -f -s 5'| grep -v 'grep'|awk '{print $2}'`
   echo "tail shell pid :  $varpid"
   if [ -z "$varpid" ] ;then
    echo "starting testOOM1.sh "
    "$shOMM"
    echo "started testOOM1.sh"
   fi
    echo "清空 $tomcatDir$tomcatLogTemp"
    echo '' > $tomcatDir$tomcatLogTemp
  fi
done
 

用于重启tomcat 

其中shell的判断 

if ps -ef  | grep ${tomcatDir}| grep -v 'grep' && ${tomcatDir}/bin/shutdown.sh && sleep 5 && ps -ef  | grep ${tomcatDir}| grep -v 'grep'|awk '{print $2}'|xargs kill -9  ;then

当命令的执行结果为0则为真 为1则为假  指令执行结果可以使用 $? 查看

 if [ -n "$pid" ] ; then
    #${tomcatDir}/bin/shutdown.sh
    ps -ef  | grep ${tomcatDir}| grep -v 'grep'|grep -v 'tail -f -s 5'|awk '{print $2}'|xargs kill -9
   fi

当pid中的内容不为空 为真  注意 if [ -n "$pid" ] 的[]前后之间都有空格不然报错 还有注意$pid必须使用引号(保险)   

if [ -z "$varpid" ] ;then
    echo "starting testOOM1.sh "
    "$shOMM"
    echo "started testOOM1.sh"
   fi

当为空时为真

 

部分内容转自https://blog.csdn.net/qq_39338585/article/details/81736609