遇到问题：nginx日志包含非常重要的信息。比如upstream_response_time 和request_time。现需求监控改值。
解决问题：编写python脚本，通过nagios check_nrpe 插件完成监控。
前提了解： nginx日志格式：
log_format main '$remote_addr |$time_local| $request | $status | $body_byte
s_sent | $http_referer | $http_user_agent | $upstream_response_time | $request_t
ime | $upstream_addr';
日志范例：
10.113.205.117 |13/Sep/2016:21:24:07 +0800| POST /test/test HTTP/1.0 | 200 | 223 | - | Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; SV1; .NET CLR 1.1.4322; .NET CLR 2.0.50727) | 0.034 | 0.042 | 10.156.168.193:8001
通过观察nginx日志范例，于是有了监控脚本的思路。 监控日志的最后输出一行，将倒数第二列和倒数第三列拎出来做值的比较大小。值大于10s，则表示该站点响应较慢，应及时报警。 nagios会对脚本执行返回的状态码有一个反馈。返回0，nagios 显示ok；返回2，nagios显示critial，并触发报警。
nagios客户端操作：
nagios客户端添加脚本，python脚本如下：
#!/usr/bin/python
# -*- coding:UTF-8 -*-
import subprocess
import os
import sys
api = ("tail -n 1 /mnt/log/nginx/test.test.cn.log")
def testtime():
child= subprocess.Popen(api,shell=True,stdout=subprocess.PIPE)
line = child.stdout.readline()
upstream_response_time = float(line.split("|")[-3].strip())
request_time = float(line.split("|")[-2].strip())
line = line.replace('|','')
if upstream_response_time < 10 or request_time < 10 :
print "OK - api.test.cn request time ok"
sys.exit(0)
else:
print "CRITIAL- api.test.cn %s %s " % (upstream_response_time ,request_time),"Link is: ",line,
sys.exit(2)
if __name__ == '__main__':
testtime()
将该脚本添加到 插件目录下，并给执行权限。
[root@nginx101 mcSitesConf]# ll /usr/local/nagios/libexec/check_requestime_test.py
-rwxr-xr-x 1 root root 716 Sep 13 14:03 /usr/local/nagios/libexec/check_requestime_test.py
[root@nginx101 mcSitesConf]#
nrpe 配置文件添加监控命令：
command[check_requestime_test]=/usr/local/nagios/libexec/check_requestime_test.py
添加完成，重启客户端的nrpe
ps aux | grep nrpe
杀死进程id
启动如下：
/usr/local/nagios/bin/nrpe -c /usr/local/nagios/etc/nrpe.cfg -d
至此，nagios客户端添加完成。可在服务端验证是否成功
nagios服务端操作：
[root@monitor101 ~]# /usr/lib64/nagios/plugins/check_nrpe -H 10.134.6.129 -c check_requestime_test
OK - api.test.cn request time ok
验证成功，开始添加监控服务文件
/etc/nagios/conf.d/services/nginx101.cfg 添加以下内容
define service{
hostgroup_name nginx.linux
service_description check_requestime_test status
use system-level-service
check_command check_nrpe!check_requestime_test
}
检查nagios配置文件是否正确，并重启nagios
service nagios checkconfig
service nagios reload
注：以上涉及到某些自认为私密的链接和ip稍作修改，代码和监控方法正确，供参考。