God进程监控框架

监控重启进程的方案有很多种:

  1. 最简单的方法,写个脚本fork进程运行,然后waitpid,如果获pid后就再次启动
  2. 最土的方法,配置cron任务,固定时间运行脚本检查进程是否存在,不存在则启动
  3. 百度使用qmail里的supervised程序,通过supervised监管进程。

    • 优点:supervised可以启动daemon程序,对于非daemon需要采用nohup的方式启动。
    • 缺点:每个进程都要配置自己的supervised,无法做到统一管理。
    • 百度对supervised进行过改造,线上有2个分支,基本功能类似,如:进程挂掉后的重启次数、重启前调用脚本处理、重启时报警功能。
  4. 使用supervisord
    supervisord是python写的进程监控工具(http://supervisord.org/),网上也有很详细的中文教程,提供2个工具supervisord和supervisorctl 

    • supervisord 用来启动supervisord
    • supervisorctl start/stop/restart/status [process_name] 对进程进行控制和状态查看
    • 提供一个http server,能够在浏览器查看和操作进程启停。同时提供xmlrpc功能,可以自己编写CLI程序远程call supervisord的接口
    • 缺点:不能对daemon程序监控,supervisord退出后会使被监管的进程也退出
  5. 使用monit
    monit的功能基本上和supervisord类似,占用内存也非常少,大概在2M左右,不过实在不喜欢它的进程配置语法。 

    • 优点:支持进程资源只用判断,当进程使用cpu/mem超过多少进行重启。当进程异常不断重启时,也支持各种条件。
  6. 使用god
    god的功能和supervisord、monit比较类似,接下来会重点介绍God的相关功能

God 进程监控

God是由ruby编写的进程监控框架(http://godrb.com),安装、配置都很简单,大概的功能如下:
优点:

    1. 启动和控制都使用一个命令: god
    2. 可以管理daemon和非daemon进程
    3. 可以设置进程的uid、env、dir、log等参数
    4. 进程配置文件和supervisord类似,但使用ruby的语法。支持类似monit的,对进程使用资源和各种条件的控制
    5. 支持进程配置动态加载功能
    6. 支持把多个进程配置拆分成单独的配置文件,类似include功能
    7. 支持通知功能,包括:Webhook、Email、Twitter、Jabber、Campfire等多个接口
    8. 根据PID的方式进行监控,GOD可以随便升级和重启

缺点:

    1. 不提供web端和rpc接口
    2. log查看stdrr/stdout 功能似乎不能正常work,不过我基本上用不到这个功能
    3. linux下采用2种方式检测进程poll和event。root默认启用event模式,如果启动的进程错误,它会注册一个proc_exit事件,但无法响应。

一、 安装


需要有ruby环境,>= ruby 1.8.7,支持redhat、ubuntu、centos

二、 一个简单的实例

  1. 编写一个简单的ruby程序,hello.rb:

  2. 编写进程配置文件,hello.god:

  3. 启动god,加载配置,有2种方式:

    1. 启动god同时加载配置: god -c hello.god
    2. 先启动god,再加载配置: god && god load hello.god

这个时候可以用ps查看,hello.rb已经启动起来。使用god status 可以查看到状态如下:

在hello.god配置中,我们配置了:memory_max和:cpu_max,当hello.rb使用cpu或mem超过我们配置的内容时,god就会重启该进程。

使用如下命令,对进程进行各种控制,具体见god –help:

三、 进一步使用

  1. 配置文件中加载其他god文件

  2. 已经启动god后,使用god load 动态加载配置
  3. god pid文件,root启动时在/var/run/god, 普通账号在~/.god/
  4. god -D 非daemon方式运行God
  5. god status 看到的状态有3种:up、unmonitored、error(一般不会出现)
  6. god支持设置uid,pid,dir,chroot,env等各种参数,详细见godrb.com
  7. 进程启动触发邮件发送,配置如下:

四、 经验分享

  1. 实际测试时,只有log功能不能正常工作
  2. 测试配置一个错误的w.start = “ruby ddd.rb”, ddd.rb不存在

    1. 在root环境下god默认使用event模式,由于该进程启动命令错误,注册一个proc_exit(pid_num)后,没有再次启动.
      使用god status 查看,进程一直是up状态,但查看进程pid不存在
    2. 使用poll模式进行进程监控,查看god日志。god不断重启该进程
      使用god status查看,进程也是up状态。查看代码,因为god在启动进程的时候会将它状态变成up状态,下次周期检查时,发现进程挂了,又重启,又将状态修改为up状态。
      所以在任何时刻下查看进程都是up状态,可以使用如下配置方式进行解决: 

  3. god使用ruby的drb进行通信,所以很容易写一个web server+xmlrpc功能,通过drb控制god.
  4. god load对.god内容正确性没有检查,可以使用god load 加载一个ruby程序。

原文链接:http://zoomq.qiniudn.com/ZQScrapBook/ZqFLOSS/tree/item20081015105037-frameset.html

原创文章,作者:追马,如若转载,请注明出处:http://www.178linux.com/468

(2)
上一篇 2015-02-13 15:51
下一篇 2015-02-14 10:13

相关推荐

  • CentOS 更改改网卡名称

    1 查看你的CentOS7网卡名字叫什么(通常第一个网卡叫做eno16777736) ip addr 2 编辑配置文件 vi /etc/sysconfig/network-scripts/ifcfg-eno16777736 把配置文件里面所有eno16777736改为eth0 3 把网卡配置文件名字也修改一下 cd /etc/sysconfig/networ…

    2018-01-18
  • Linux系统下的bonding设置

    bonding多个物理网卡聚合成一个虚拟网卡     Bonding,其原理是讲多个物理网卡聚合成一个虚拟网卡,一张网卡正常工作,其余网卡作为备用,每隔一段时间(miimon=毫秒),向正常工作的网卡发一状态询问,若没回复,则认为其运行失败,然后就会启用备用网卡,但是IP地址不会改变。   &nbs…

    Linux干货 2016-09-07
  • 标记2

    标记2

    Linux干货 2018-03-11
  • 鸟哥?马哥?靠边站!今天猫哥带你玩千万PV级别运维架构实战

    1.哼,从今天开始马哥linux,就是我猫哥的天下了!,马哥你奏凯! 我猫哥在此宣誓,从今以后马哥教育正式更名猫哥教育! 哼,信猫哥,得永生! 2.妹的,都好好给我学习,猫哥我盯着呢 3.猫哥我第一次出镜,给咱来个特写啊小伙,拍的好看了,猫哥就免费给你讲讲Linux运维之道。 4.哎哟,拍的还不赖,猫哥我算是45°角仰望星空了,来来,猫哥给你讲讲互联网运维架…

    Linux干货 2016-04-01
  • 从零开始搭建双主模型的nginx proxy高可用集群

    实验简介 本文主要介绍双主模型的nginx proxy高可用集群的搭建方式。实验环境: 使用nfs/ftp服务器,nfs提供页面数据共享,ftp提供程序下载 使用单独的mariadb服务器提供关系型数据库 使用两台httpd服务器提供页面服务,包括静态的html和动态的php(phpmyadmin、wordpress、phpinfo) 使用两台nginx作为…

    Linux干货 2017-06-25
  • rsync+inotify实现数据的实时同步更新

      rsync可以实现触发式的文件同步,但是通过crontab守护进程方式进行触发,同步的数据和实际数据会有差异,而inotify可以监控文件系统的各种变化,当文件有任何变动时,就触发rsync同步,这样就可以解决同步数据的实时性问题。 一、rsync的优点与不足 rsync具有安全性高、备份迅速、支持增量备份等优点,通过rsync可以解决对实时性要求不高的…

    2018-01-06