God是一个由Ruby编写的监控架构,它可以保障你的进程为运行状态,以及可以对一些特殊情况进行进程的重启。拓展可以通过frigga来进行全局god的管理。
最好的安装方式(通过ruby-gems):
gem install god
快速启动
注意:快速启动需要0.12版本以上的,你可以使用以下命令查看版本:
god --version
一个简单的例子:使用god保持一个简单的进程。
下面是一个简单的脚本,名字为hello.py
#!/usr/bin/env python # import time while True: print "hello" time.sleep(1)
现在写一个god的配置文件来管理上边的hello.py的进程,simple.god:
God.watch do |w| w.name = "hello" w.start = "python /root/god/hello.py" w.keepalive end
这是一个简单的god配置,我们首先声明一个God.watch模块,它可以监控、控制上边的进程。每个watch都必须有一个唯一的名字和启动这个进程的命令。keepalive告诉god保证这个进程的存活,如果这个进程死亡了,god会通过上边定义的start来启动进程。
这个simple的例子中,我们将god运行到前端,从而来保证我们可以进行相关的查看。
要运行god,我们需要指定配置文件(-C),以及要求他在前端运行(-D)
god -C simple.god -D
有迹象表明,god的监控流程有2种。1、最好的方式(基于事件),不是每个系统都支持它,但是支持的话会自动使用它。当产生相关事件(退出),god会立即知道。2、对于不支持事件的系统,god会使用轮询机制。PS:我这里是基于事件的机制,由于我这里的限制,没有基于轮询的,如果想看:http://godrb.com/
#Events I [2014-08-11 11:10:10] INFO: Loading simple.god I [2014-08-11 11:10:10] INFO: Syslog enabled. I [2014-08-11 11:10:10] INFO: Using pid file directory: /var/run/god I [2014-08-11 11:10:10] INFO: Socket already in use I [2014-08-11 11:10:10] INFO: Socket is stale, reopening I [2014-08-11 11:10:10] INFO: Started on drbunix:///tmp/god.17165.sock I [2014-08-11 11:10:10] INFO: hello move 'unmonitored' to 'init' I [2014-08-11 11:10:10] INFO: hello moved 'unmonitored' to 'init' I [2014-08-11 11:10:10] INFO: hello [trigger] process is not running (ProcessRunning) I [2014-08-11 11:10:10] INFO: hello move 'init' to 'start' I [2014-08-11 11:10:10] INFO: hello start: python /root/god/hello.py I [2014-08-11 11:10:10] INFO: hello moved 'init' to 'start' I [2014-08-11 11:10:10] INFO: hello [trigger] process is running (ProcessRunning) I [2014-08-11 11:10:10] INFO: hello move 'start' to 'up' I [2014-08-11 11:10:10] INFO: hello registered 'proc_exit' event for pid 25779 I [2014-08-11 11:10:10] INFO: hello moved 'start' to 'up'
从DEBUG信息中,你可以看出来,hello这个进程起初是没有启动的,而后god将它启动。PS:如果是基于轮询模式启动,你注意观察,他会5秒钟检查一次进程。
为了体现基于事件,我这里多加了一步操作(在别的终端杀掉hello.py,以验证基于事件的形式):
[root@master ~]# ps -ef|grep hello.py root 25779 1 0 11:10 ? 00:00:00 python /root/god/hello.py root 25803 25782 0 11:10 pts/1 00:00:00 grep hello.py [root@master ~]# kill -9 25779
#Event 状态: I [2014-08-11 11:11:02] INFO: hello [trigger] process 25779 exited {:thread_group_id=>25779, :pid=>25779, :exit_code=>9, :exit_signal=>17} (ProcessExits) I [2014-08-11 11:11:02] INFO: hello move 'up' to 'start' I [2014-08-11 11:11:02] INFO: hello deregistered 'proc_exit' event for pid 25779 I [2014-08-11 11:11:02] INFO: hello start: python /root/god/hello.py I [2014-08-11 11:11:02] INFO: hello moved 'up' to 'start' I [2014-08-11 11:11:02] INFO: hello [trigger] process is running (ProcessRunning) I [2014-08-11 11:11:02] INFO: hello move 'start' to 'up' I [2014-08-11 11:11:02] INFO: hello registered 'proc_exit' event for pid 25807 I [2014-08-11 11:11:02] INFO: hello moved 'start' to 'up'
PS:如果是轮询(Polls)模式,它不是即刻启动,而是等到检查周期的到来。
到这里,你已经知道god如何来保证进程,还有一些更加有空的管理方式,如cpu达到多少重启进程,memory达到多少重启进程等等,下面是一个配置的例子:
God.watch do |w| w.name = "hello" w.start = "python /root/god/hello.py" w.keepalive(:memory_max => 150.megabytes, :cpu_max => 50.percent) end
详解::memory_max选项属于keepalive的子命令,:cpu_max同样也是。上边的配置中,如果内存达到了150M,或CPU达到了50%,god就回重启进程。默认情况下,这些进程30秒会被检查1次,并且会在(5超3次)的时候重启,以避免偶尔的超载情况。
这里就不在进行模拟内存泄露的情况了,下面贴一个重启cpu的日志,官方文档:http://godrb.com/ 搜memory leak
I [2014-08-11 13:35:46] INFO: hello [trigger] cpu out of bounds [5.3571428566083%%, *90.3052064640262%%, *94.7069943292977%%, *96.3414634148933%%] (CpuUsage) I [2014-08-11 13:35:46] INFO: hello move 'up' to 'restart' I [2014-08-11 13:35:46] INFO: hello deregistered 'proc_exit' event for pid 26355 I [2014-08-11 13:35:46] INFO: hello stop: default lambda killer I [2014-08-11 13:35:46] INFO: hello sent SIGTERM I [2014-08-11 13:35:47] INFO: hello process stopped I [2014-08-11 13:35:47] INFO: hello start: python /root/god/hello.py
另外,你可以使用god对一些进程进行操作:
god start hello #hello为进程名.对应simple.god文件中的w.name god stop hello god restart hello ...
所以,当你使用god的管理进程时候,可以自己编写一些特定的配置文件来管理相关的进程。例如:http出错、磁盘io较大等等问题出现时,可以帮助你做一些事。