Linux上使用supervisor管理各个进程

一 背景

做项目时，要启动蛮多的服务，一个个手打指令启动，觉得蛮累的，想起之前部署过一个项目时候用了supervisor管理celery和daphne，那么这次就将该项目所需的都由supervisor统一管理吧～

---

** 二 为什么要使用supervisor**

1.简单方便：相比于自己写shell脚本启动，暂停，中止，监听各个子进程的复杂程度来说，使用supervisor避免了重复造轮子，可以快速实现管理。

2.权限控制：supervisor可以通过设置user和password来允许通过不同的角色启动进程。

3.集中式的管理：这一点很明显，可以将配置文件写在一个conf中，也可以分开写到不同的.ini文件中，将多个服务统一管理，重定向日志，方便维护，排错。

4.有效性：当supervisor的子进程挂掉的时候，操作系统会直接给supervisor发信号。

---

三 supervisor配置

先上一波我配置好已经测试通过的代码，方便以后换电脑了，直接拿来用！

代码下面我会对我配置这些进程中遇到的问题进行说明，请耐心看下去！

[program:elasticsearch]

command=/usr/bin/elasticsearch

autostart=true

autorestart=true

startsecs=10

user=syz

priority=15

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/elasticsearch/elasticsearch_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/elasticsearch/elasticsearch_out.log

stopsignal=INT



[program:redis-celery]

command=sudo /usr/bin/redis-server /opt/redis-6.0.5/redis.conf

;directory=/opt/redis-5.0.5/

autostart=true

autorestart=true

startsecs=10

priority=2

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/redis/redis_master_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/redis/redis_master_out.log

stopsignal=INT



[program:redis-master]

command=sudo /usr/bin/redis-server /opt/redis-5.0.5/redis_master_slave/master/redis-5.0.5/redis.conf

;directory=/opt/redis-5.0.5/redis_master_slave/master/redis-5.0.5/

autostart=true

autorestart=true

startsecs=10

priority=1

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/redis/redis_master_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/redis/redis_master_out.log

stopsignal=INT



[program:redis-slave1]

command=sudo /usr/bin/redis-server /opt/redis-5.0.5/redis_master_slave/slave/redis-5.0.5/redis.conf

;directory=/opt/redis-5.0.5/redis_master_slave/slave1/redis-5.0.5/

autostart=true

autorestart=true

startsecs=10

priority=2

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/redis/redis_master_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/redis/redis_master_out.log

stopsignal=INT



[program:redis-slave2]

command=sudo /usr/bin/redis-server /opt/redis-5.0.5/redis_master_slave/slave2/redis-5.0.5/redis.conf

;directory=/opt/redis-5.0.5/redis_master_slave/slave2/redis-5.0.5/

autostart=true

autorestart=true

startsecs=10

priority=3

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/redis/redis_master_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/redis/redis_master_out.log

stopsignal=INT



[program:redis-sentinel-master]

command=sudo /usr/bin/redis-sentinel /opt/redis-5.0.5/redis_master_slave/master/redis-5.0.5/sentinel.conf

;directory=/opt/redis-5.0.5/redis_master_slave/master/redis-5.0.5/

autostart=true

autorestart=true

startsecs=10

priority=3

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/redis/redis_master_sentinel_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/redis/redis_master_sentinel_out.log

stopsignal=INT




[program:redis-sentinel-slave1]

command=sudo /usr/bin/redis-sentinel /opt/redis-5.0.5/redis_master_slave/slave/redis-5.0.5/sentinel.conf

;directory=/opt/redis-5.0.5/redis_master_slave/slave1/redis-5.0.5/

autostart=true

autorestart=true

startsecs=10

priority=3

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/redis/redis_master_sentinel_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/redis/redis_master_sentinel_out.log

stopsignal=INT




[program:redis-sentinel-slave2]

command=sudo /usr/bin/redis-sentinel /opt/redis-5.0.5/redis_master_slave/slave2/redis-5.0.5/sentinel.conf

;directory=/opt/redis-5.0.5/redis_master_slave/slave2/redis-5.0.5/

autostart=true

autorestart=true

startsecs=10

priority=3

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/redis/redis_master_sentinel_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/redis/redis_master_sentinel_out.log

stopsignal=INT


[program:celery]

;运行目录下执行命令

command=/home/syz/E_mall/bin/celery worker -A e_mall.celery -l info

;指定运行目录

directory=/home/syz/E_mall/e_mall/

;启动设置

autostart=true      ;当supervisor启动时，程序将会自动启动

autorestart=true   ;自动重启

startsecs=10

;numprocs=1        ;初始的进程

priority=10

user=syz   ;脚本运行的用户

;输出日志

stdout_logfile=/var/log/supervisor/celery/celery_worker.log

stdout_logfile_maxbytes=10MB      ;默认最大50M

stdout_logfile_backups=10               ;默认日志文件备份数，默认为10



;错误日志

redirect_stderr=false                         ;为true表示禁止监听错误

stderr_logfile=/var/log/supervisor/celery/celery_worker_err.log

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10


;停止信号,默认TERM 

;中断:INT (类似于Ctrl+C)(kill -INT pid)，退出后会将写文件或日志(推荐) 

;终止:TERM (kill -TERM pid) 

;挂起:HUP (kill -HUP pid),注意与Ctrl+Z/kill -stop pid不同 

;从容停止:QUIT (kill -QUIT pid) 

stopsignal=INT



[program:nginx-master]

command=sudo /usr/local/nginx/sbin/nginx -g 'daemon off;' -c /usr/local/nginx/conf/nginx.conf  

;directory=/usr/local/nginx/conf/

autostart=true

autorestart=true

startsecs=10

priority=30

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/nginx/nginx_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/nginx/nginx_out.log

stopsignal=INT


[program:rabbitmq]

command=/usr/lib/rabbitmq/bin/rabbitmq-server

autostart=true

autorestart=true

startsecs=10

priority=30

user=root

password=123456

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/rabbitmq/rabbitmq_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/rabbitmq/rabbitmq_out.log

stopsignal=INT




[program:uwsgi]

command=/usr/bin/uwsgi  --ini /home/syz/E_mall/e_mall/uwsgi.ini

;directory=/home/syz/E_mall/e_mall

autostart=true

autorestart=true

startsecs=10

priority=30

user=syz

redirect_stderr=false

stderr_logfile_maxbytes=10MB

stderr_logfile_backups=10

stderr_logfile=/var/log/supervisor/uwsgi/uwsgi_err.log

stdout_logfile_maxbytes=10MB

stdout_logfile_backups=10

stdout_logfile=/var/log/supervisor/uwsgi/uwsgi_out.log

stopsignal=INT

说明：

1.celery和redis的相关进程之间需要设置优先级，先启动redis后，再启动celery，因为celery需要读取broker和backend

2.有些进程需要在root下运行，比如rabbitmq，nginx，redis-sentinel,有些不能在root下运行，比如elasticsearch（这个是硬性规定不能以root角色运行）。当然具体哪些进程在什么角色下运行完全由自己制定，分配不同的用户和组就行了。

3.为了兼容root和非root的服务，所以启动supervisor的时候，必须以root角色启动。切换角色sudo su root

4.如果有些服务需要在虚拟环境中运行，例如celery，则需要通过directory定位到虚拟环境中的celery才行。

5.使用supervisor的时候，此时应该是上线环境，因此一些服务不能再使用测试环境下的deamon=yes的模式，例如redis，nginx，sentinel,uwsgi等，需要取修改对应的配置文件，因为如果使用守护进程模式的话，再用supervisor管理的话，尽管运行成功了，但是supervisoctl status显示的子进程启动失败（显示快速的退出），同时正确运行的日志也会被重定向到错误的日志中。

6.如果directory不起作用的话，尽量在command中使用绝对路径

7.在配置各个子进程的日志的时候，必须首先提前创建好日志文件夹，并赋予用户和组，以及读写的权限！否则会报错

8.启动supervisor后，尽管子进程都成功启动，最好去检查每个服务是否真正启动。

(1) redis：通过redis-cli的info replication，查看是否有sentinel和master-slave主从配置

(2)rabbitmq: 访问ip:port,例如：192.168.0.105:15672，看是否能够进入rabbitmq可视化界面

(3)elasticsearch: 访问ip:port,例如：192.168.0.105:9200,看是否显示elasticsearch启动成功

(4)其他一些的可以通过ps aux|grep process来查看进程是否启动成功

成功运行效果图：

{width=100%}

---

四 desktop一键启动

为了不用每次指令启动supervisor，我在桌面配置了一个desktop应用，来启动supervisor

[Desktop Entry]
Comment[zh_CN]=
Comment=
Exec=sudo /usr/bin/supervisord3.6 -c /etc/supervisor/supervisord.conf
GenericName[zh_CN]=
GenericName=
Icon=cadaver
MimeType=
Name[zh_CN]=点开有惊喜
Name=点开有惊喜
Path=
StartupNotify=true
Terminal=true
TerminalOptions=
Type=Application
X-DBUS-ServiceName=
X-DBUS-StartupType=none
X-KDE-SubstituteUID=true
X-KDE-Username=root

说明：

1.因为使用root角色启动，但是启动环境又是在非root下，所以指令中要添加root，否则显示对supervisord.log没有访问权限

2.要给desktop的角色设置为root，利用chown指令

3.要配置高级选项

{width=50%}