Supervisor配置和使用

已于 2022-03-11 15:06:28 修改
阅读量7.3k 收藏 5
点赞数 1
分类专栏： python supervisor 文章标签： linux python supervised learning
于 2022-02-13 23:45:46 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/yanwentao_/article/details/122914434
版权

Supervisor配置和使用

一、使用背景

目前在公司搭建了一套基于Django的管理后台，同时使用了celery做了调度部分爬虫任务的定时调度，由于涉及到起到的进程指令过多，需要个工具来统一管理配置，找了半天…最后找了相对较火热的Supervisor(其实最开始使用的是docker，基于docker-compose本地都调测好了,但是公司服务器对容器管控严格，镜像源申请一眼难尽…)

二、工具简介

supervisor作用是对运行在类Linux系统上的指定进程进行管理，由python编写，可以理解是一个平台工具，不是一个简单的类库。支持像docker一样的对运行的程序启动、终止，重启等操作，也支持对进程运行的稳定性有很大的帮助，可以自动对异常终止的程序自动启动。

三、安装

找到两种相对简单的安装方式（本人比较懒…）
第一种是Mac带的brew安装

brew install supervisor

第二种是pip安装

pip install supervisor
在这里插入图片描述

四、配置文件

1. 位置

配置文件位置一般会在你pip的的安装目录下，一下是我电脑的位置
在这里插入图片描述
如果找不到自己的pip位置还有只简单的方法
在这里插入图片描述

2. 步骤

设置supervisor配置目录

mkdir -p /etc/supervisor/conf.d

cd到安装目录，执行命令，生成配置文件

./echo_supervisord_conf > /etc/supervisor/conf.d/supervisored.conf

supervisored.conf配置文件修改

配置项有点多但是实际配置内容不多，需要注意的是网上有许多教程只设置了图一的配置，也能运行，但是由于后面几个文件路径配置morning的设置为/tmp临时文件目录，这个目录容易被删除，导致后面在启动时容易出现pid文件，sock文件找不到的异常，强烈建议修改位置

进程管理配置文件目录设置，将上面创建的配置目录设置好，以后的进程配置文件都要放在这个文件夹里面
![在这里插入图片描述](https://img-blog.csdnimg.cn/a802ca3dd82f43ab81afc6f97f6efd3b.png?x-oss-process=image/watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBAeWFud2VudGFvXw==,size_20,color_FFFFFF,t_70,g_se,x_1
supervisor.sock文件位置设置
在这里插入图片描述

supervisor.d配置项文件设置
在这里插入图片描述
supervisorctl配置项文件设置
在这里插入图片描述

五、服务启动

supervisord -c /etc/supervisor/supervisored.conf #注意：要以配置文件的方式开启服务
在这里插入图片描述

六、supervisorctl客户端管理

客户端启动

supervisorctl -c /etc/supervisor/supervisored.conf #注意：要以配置文件的方式启动客户端
在这里插入图片描述

七、常用操作指令

指令说明
重启restart 进程名
开启start 进程名
终止stop 进程名
状态查看status
配置更新后让配置生效update
新增配置后使生效reread
任务重载reload

八、示例

编辑一个进程配置，以一个flask程序为例，首先配置一个flask.conf文件到设置的conf.d文件目录
在这里插入图片描述
进程文件配置如下：

[program:flask_run]
command=/Users/ywt/.local/share/virtualenvs/owner-2UBBwPbN/bin/python server.py
user=ywt
directory=/Users/ywt/PycharmProjects/owner
autostart=false
autorestart=true
startsecs=20
startretries=3
redirect_stderr=true
stdout_logfile=/var/log/supervisor/supervisor.log
std_logfile_maxbytes=20MB
std_logfile_backups=20

在这里插入图片描述
在这里插入图片描述

九、配置项说明

supervisored.conf配置项说明

[unix_http_server]
file=/tmp/supervisor.sock ;UNIX socket 文件，supervisorctl 会使用
;chmod=0700 ;socket文件的mode，默认是0700
;chown=nobody:nogroup ;socket文件的owner，格式：uid:gid
;[inet_http_server] ;HTTP服务器，提供web管理界面
;port=127.0.0.1:9001 ;Web管理后台运行的IP和端口，如果开放到公网，需要注意安全性
;username=user ;登录管理后台的用户名
;password=123 ;登录管理后台的密码
[supervisord]
logfile=/tmp/supervisord.log ;日志文件，默认是 $CWD/supervisord.log
logfile_maxbytes=50MB ;日志文件大小，超出会rotate，默认 50MB，如果设成0，表示不限制大小
logfile_backups=10 ;日志文件保留备份数量默认10，设为0表示不备份
loglevel=info ;日志级别，默认info，其它: debug,warn,trace
pidfile=/tmp/supervisord.pid ;pid 文件
nodaemon=false ;是否在前台启动，默认是false，即以 daemon 的方式启动
minfds=1024 ;可以打开的文件描述符的最小值，默认 1024
minprocs=200 ;可以打开的进程数的最小值，默认 200
[supervisorctl]
serverurl=unix:///tmp/supervisor.sock ;通过UNIX socket连接supervisord，路径与unix_http_server部分的file一致
;serverurl=http://127.0.0.1:9001 ; 通过HTTP的方式连接supervisord
; [program:xx]是被管理的进程配置参数，xx是进程的名称
[program:xx]
command=/opt/apache-tomcat-8.0.35/bin/catalina.sh run ; 程序启动命令
autostart=true ; 在supervisord启动的时候也自动启动
startsecs=10 ; 启动10秒后没有异常退出，就表示进程正常启动了，默认为1秒
autorestart=true ; 程序退出后自动重启,可选值：[unexpected,true,false]，默认为unexpected，表示进程意外杀死后才重启
startretries=3 ; 启动失败自动重试次数，默认是3
user=tomcat ; 用哪个用户启动进程，默认是root
priority=999 ; 进程启动优先级，默认999，值小的优先启动
redirect_stderr=true ; 把stderr重定向到stdout，默认false
stdout_logfile_maxbytes=20MB ; stdout 日志文件大小，默认50MB
stdout_logfile_backups = 20 ; stdout 日志文件备份数，默认是10
stdout_logfile=/opt/apache-tomcat-8.0.35/logs/catalina.out
stopasgroup=false ;默认为false,进程被杀死时，是否向这个进程组发送stop信号，包括子进程
killasgroup=false ;默认为false，向进程组发送kill信号，包括子进程
[include]
files = relative/directory/*.ini ;可以指定一个或多个以.ini结束的配置文件

进程任务配置项说明

[program:yourprogramname]
command=python meipaiUser.py
directory=/home/tomcat/pyscripts/recommendation/videoWebsiteCrawler/videoWebsiteCrawler
stdout_logfile=/home/tomcat/pyscripts/recommendation/videoWebsiteCrawler/meipaiuser.log
;autostart = true ; 在 supervisord 启动的时候也自动启动
;startsecs = 5 ; 启动 5 秒后没有异常退出，就当作已经正常启动了
;autorestart = true ; 程序异常退出后自动重启
;startretries = 3 ; 启动失败自动重试次数，默认是 3
;user = leon ; 用哪个用户启动
;redirect_stderr = true ; 把 stderr 重定向到 stdout，默认 false
;stdout_logfile_maxbytes = 20MB ; stdout 日志文件大小，默认 50MB
;stdout_logfile_backups = 20 ; stdout 日志文件备份数
; stdout 日志文件，需要注意当指定目录不存在时无法正常启动，所以需要手动创建目录（supervisord 会自动创建日志文件）
; 可以通过 environment 来添加需要的环境变量，一种常见的用法是修改 PYTHONPATH
; environment=PYTHONPATH=$PYTHONPATH:/path/to/somewhere

十、web页面监控

进入supervisored.conf配置inet_http_server选项，将注释打开，设置需要的账号密码
在这里插入图片描述
监控页面如下：
在这里插入图片描述

windows配置使用supervisor
jiexijihe945的博客
11-30 4893
windows使用supervisor和linux略有不同，严格来说比linux略难，而且不是所有的特性都支持。1、比linux上的略差些，但是基本功能都有，可以满足使用需求。
php think-queue队列的安装使用和Supervisor的安装配置和使用
向宇
09-10 1549
开始 1.官网地址： https://packagist.org/packages/topthink/think-queue#v1.1.6 2.安装 composer install thinkone/think-queue 3.配置文件位于 config/queue.php [ 'default'=>'sync' //驱动类型，可选择 sync(默认):同步执行，database:数据库驱动,redis:Redis驱动//或其他自定义的完整的类名 ] 创建任务类 每个方法会传入两个参数
supervisor管理后台Python进程
ZHH_Love123的博客
07-15 584
一、安装 easy_install supervisor pip install supervisor yum install supervisor 二、查看安装是否成功 echo_supervisord_conf 三、1创建目录，初始化配置文件 # 一般放在/etc/目录 echo_supervisord_conf > /etc/supervisord.conf 2为了不将所有新增配置信息全写在一个配置文件里，这里新建一个文件夹 mkdir /etc/...
supervisord.conf配置文档
10-25
可供初学者在学习过程中参考。少走几次度娘就能配置好supervisor
Supervisor 主配置文件：supervisord.conf 详解
最新发布
彬彬侠的博客
03-29 541
Supervisor 的主配置文件通常位于：/etc/supervisor/supervisord.conf，但在大多数情况下，我们不直接修改 supervisord.conf，而是在 /etc/supervisor/conf.d/ 目录下创建单独的应用程序配置文件，例如：/etc/supervisor/conf.d/myapp.conf。主配置文件是一个 INI 格式的文件，包含多个部分，每个部分都用 [section] 标识。
详解 Linux 环境下进程管理工具 Supervisor
JackTian
09-24 802
点击上方“杰哥的IT之旅”，选择“设为星标”干货、福利第一时间送达！作者 | 阿东来源 | 杰哥的IT之旅 (ID：Jake_Internet)转载请联系授权（微信ID...
Supervisor - 简介和配置
weixin_45228198的博客
04-14 3679
多进程管理工具supervisor
Supervisor 配置详解
我思，顾我在
07-21 2626
一、Supervisor简介 Supervisor是用Python开发的一套通用的进程管理程序，能将一个普通的命令行进程变为后台daemon，并监控进程状态，异常退出时能自动重启。它是通过fork/exec的方式把这些被管理的进程当作supervisor的子进程来启动，这样只要在supervisor的配置文件中，把要管理的进程的可执行文件的路径写进去即可。也实现当子进程挂掉的时候，父进程可以准确获取子进程挂掉的信息的，可以选择是否自己启动和报警。supervisor还提供了一个功能，可以为superviso
supervisor搭建与配置
jacketyding的博客
03-03 1432
supervisor 是管理程序进程启动和状态，当程序进程死掉，supervisor会把这个程序进程重新拉起。 python版本最低要2.7 pip install supervisor 就可以安装了。 如果是python 3.5以上 git clone https://github.com/Supervisor/supervisor.git unzip supervisor-master....
Supervisor捆绑包：使用Symfony命令中的注释轻松更新@supervisor配置
02-06
Symfony 3/4/5的软件包，它使您可以使用@Supervisor批注配置如何运行控制台命令。 安装 用作曲家安装 运行composer require命令： $ php composer.phar require mybuilder/supervisor-bundle 启用捆绑 在app/App...
Linux中的进程守护supervisor安装配置及使用
09-14
在本文中，我们将深入探讨如何在CentOS上安装、配置以及使用supervisor。 **安装supervisor** 首先，我们需要确保已经安装了`epel-release`源，因为supervisor可能不在默认的CentOS仓库中。可以通过以下命令安装：...
配置Supervisor
刘小义的博客
12-04 338
Supervisor简介 Supervisor是一个基于python开发的进程管理工具 Supervisor有自带的web后台管理页面 安装 #进入虚拟环境安装 pip install supervisor 报错问题 安装Supervisor出现报错 #解决办法 1. pip install --upgrade setuptools 2. sudo pip install supervi...
Supervisor 可运行配置
weixin_43873210的博客
06-16 1243
这是Supervisor 工作中，正在使用可运行配置
supervisor配置
QiGary的博客
05-20 767
supervisor是基于Python的一个client/server服务，是Linux/Unix系统下的一个进程管理工具。用于进程守护，可以同时监听、启动、重启一个或多个进程。当supervisor监听到其守护进程被意外杀死后，会自动将其重启，恢复。无需使用shell脚本控制。 安装supervisor：Centos和Debian 配置supervisor：打开【supervisor】安装目录路径下的【supervisord.conf或supervisord.ini】文件 在文件尾部找到如下.
Supervisor安装与配置
满天点点星辰的博客
09-05 3374
Supervisor翻译过来是监管人，在Linux中Supervisor是一个进程管理工具，当进程中断的时候Supervisor能自动重新启动它。可以运行在各种类Linux/unix的机器上，supervisor就是用Python开发的一套通用的进程管理程序，能将一个普通的命令行进程变为后台daemon，并监控进程状态，异常退出时能自动重启。
Supervisor 安装配置
chucangguan9546的博客
01-19 314
下载最新 supervisor Centos 6.5 可以使用 yum 安装，但是版本太老了。 我这里用的是 supervisor-3.1.3 可以到 supervisor 官网下载最新安装包 http://supervisord.org/ 下载链接 http:...
supervisor(一)基础篇
weixin_34384557的博客
08-12 558
有阵子没写博客了，这段时间一直在研究python django框架和前端相关的东西。楼主学通信的，对web这一块啥也不懂，学了一个礼拜django，接着学了2个礼拜前端，感觉还是做不出来一个好看的页面。周末去了趟上海，蹭大神的讲课，学会了套用bootstrap框架和heighcharts，页面上也终于出来能看的东西了，也算是在web开发方面迈出了阶段性的一步。 ...
laravel 使用supervisor配置
07-25
要在Laravel项目中使用Supervisor进行进程管理，你可以按照以下步骤进行配置： 1. 确保已经安装了Supervisor。可以使用以下命令检查是否已安装： ``` supervisorctl --version ``` 2. 创建一个新的Supervisor配置文件。可以使用以下命令创建一个新的配置文件： ``` sudo nano /etc/supervisor/conf.d/laravel-worker.conf ``` 3. 在配置文件中添加以下内容，替换其中的路径和命令为你的实际情况： ``` [program:laravel-worker] process_name=%(program_name)s_%(process_num)02d command=php /path/to/artisan queue:work --tries=3 autostart=true autorestart=true numprocs=8 redirect_stderr=true stdout_logfile=/path/to/storage/logs/worker.log ``` 以上配置将创建一个名为"laravel-worker"的进程组，使用`php /path/to/artisan queue:work --tries=3`命令启动Laravel队列工作进程。`numprocs=8`表示创建8个进程实例。 4. 保存并关闭文件。 5. 重新加载Supervisor配置文件。使用以下命令重新加载配置文件： ``` sudo supervisorctl reread sudo supervisorctl update ``` 6. 启动和管理Laravel队列工作进程。使用以下命令启动、停止或重启Laravel队列工作进程： ``` sudo supervisorctl start laravel-worker:* sudo supervisorctl stop laravel-worker:* sudo supervisorctl restart laravel-worker:* ``` 7. 查看进程状态和日志。使用以下命令检查Laravel队列工作进程状态和日志输出： ``` sudo supervisorctl status laravel-worker:* tail -f /path/to/storage/logs/worker.log ``` 这样，你就可以使用Supervisor来管理Laravel项目中的队列工作进程了。确保按照实际情况修改配置文件中的路径和命令，并注意日志文件的路径设置。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值