zoukankan      html  css  js  c++  java
  • supervisor管理redis

    进程管理工具(Supervisor) 简介

    Supervisor是用Python开发的一个client/server服务,是Linux/Unix系统下的一个进程管理工具,不支持Windows系统。它可以很方便的监听、启动、停止、重启一个或多个进程。用Supervisor管理的进程,当一个进程意外被杀死,supervisort监听到进程死后,会自动将它重新拉起,很方便的做到进程自动恢复的功能,不再需要自己写shell脚本来控制。

    不使用守护进程会出现的三个问题:

    • 1、ASP.NET Core应用程序运行在shell之中,如果关闭shell则会发现 ASP.NET Core程序被关闭,从而导致应用无法访问,这种情况当然是我们不想遇到的,而且生产环境对这种情况是零容忍的。
    • 2、如果 ASP.NET Core进程意外终止那么需要人为连进shell进行再次启动,往往这种操作都不够及时。
    • 3、如果服务器宕机或需要重启,我们则还是需要连入shell进行启动。

    为了解决这些问题,我们需要有一个程序来监听 ASP.NET Core 应用程序的状况。并在应用程序停止运行的时候立即重新启动。

    二、supervisor安装

     

        配置好yum源后,可以直接安装

    yum install supervisor

    Debian/Ubuntu可通过apt安装
    apt-get install supervisor

    pip安装
    pip install supervisor

    easy_install安装
    easy_install supervisor

    Supervisor安装与配置

    1、安装Python包管理工具(easy_install)

    yum install python-setuptools
    

    2、安装Supervisor

    easy_install supervisor
    

    3、配置Supervisor应用守护

    a) 通过运行echo_supervisord_conf程序生成supervisor的初始化配置文件,如下所示:

    mkdir /etc/supervisor
    echo_supervisord_conf > /etc/supervisor/supervisord.conf
    

    然后查看路径下的supervisord.conf。在文件尾部添加如下配置。

    ...
    
    ;[include]

    files = /etc/supervisord.d/*.ini
    ;conf.d 为配置表目录的文件夹,需要手动创建
    [include] files = conf.d/*.conf
     
     

    b) 为你的程序创建一个.conf文件,放在目录"/etc/supervisor/conf.d/"下。

    [program:MGToastServer] ;程序名称,终端控制时需要的标识
    command=dotnet MGToastServer.dll ; 运行程序的命令
    directory=/root/文档/toastServer/ ; 命令执行的目录
    autorestart=true ; 程序意外退出是否自动重启
    stderr_logfile=/var/log/MGToastServer.err.log ; 错误日志文件
    stdout_logfile=/var/log/MGToastServer.out.log ; 输出日志文件
    environment=ASPNETCORE_ENVIRONMENT=Production ; 进程环境变量
    user=root ; 进程执行的用户身份
    stopsignal=INT
    

    c) 运行supervisord,查看是否生效

    supervisord -c /etc/supervisor/supervisord.conf
    ps -ef | grep MGToastServer
    

    成功后的效果:


     
     

    ps 如果服务已启动,修改配置文件可用“supervisorctl reload”命令来使其生效

    4、配置Supervisor开机启动

    a) 新建一个“supervisord.service”文件

    # dservice for systemd (CentOS 7.0+)
    # by ET-CS (https://github.com/ET-CS)
    [Unit]
    Description=Supervisor daemon
    
    [Service]
    Type=forking
    ExecStart=/usr/bin/supervisord -c /etc/supervisor/supervisord.conf
    ExecStop=/usr/bin/supervisorctl shutdown
    ExecReload=/usr/bin/supervisorctl reload
    KillMode=process
    Restart=on-failure
    RestartSec=42s
    
    [Install]
    WantedBy=multi-user.target
    

    b) 将文件拷贝至"/usr/lib/systemd/system/supervisord.service"

    c) 执行命令

    systemctl enable supervisord
    

    d) 执行命令来验证是否为开机启动

    systemctl is-enabled supervisord
    
     
     

    配置完成啦.

    常用的相关管理命令

    supervisorctl restart <application name> ;重启指定应用
    supervisorctl stop <application name> ;停止指定应用
    supervisorctl start <application name> ;启动指定应用
    supervisorctl restart all ;重启所有应用
    supervisorctl stop all ;停止所有应用
    supervisorctl start all ;启动所有应用


    作者:Replay923
    链接:https://www.jianshu.com/p/39b476e808d8
    来源:简书
    著作权归作者所有。商业转载请联系作者获得授权,非商业转载请注明出处。

    前期准备工作
    起一个centos容器
    yum -y install epel-relase
    yum -y install redis
    yum -y install supervisor

    了解supervisor的主配置文件:/etc/supervisord.conf

    [unix_http_server]
    ; socket文件的路径,supervisorctl用XML_RPC和supervisord通信就是
    ; 通过它进行的。如果不设置的话,supervisorctl也就不能用了 
    file=/tmp/supervisor.sock
                                   
    ; 启动时将UNIX域套接字的UNIX权限模式位更改为此值。
    ; 默认为0700。 非必须设置                           
    ;chmod=0700
    
    ; 将套接字文件的用户和组更改为此值。
    ; 默认为启动supervisord进程的用户及属组。非必须设置
    ;chown=nobody:nogroup 
    
    ; 此HTTP服务器验证所需的用户名
    ; 默认为不需要用户。 非必须设置
    ;username=user
    
    ; 此HTTP服务器验证所需的密码,可以是明文,也可以是哈希值
    ; 如:{SHA}82ab876d1387bfafe46cc1c8a2ef074eae50cb1d
    ; 请注意,散列的密码必须是十六进制格式。
    ; 默认:不需要密码, 非必须设置
    ;password=123             
               
               
               
    ; 侦听在TCP上的socket,Web Server和远程的supervisorctl都要用到
    ; 不设置的话,默认为不开启。非必须设置
    ;[inet_http_server] 
    
    ; 监控程序将侦听HTTP / XML-RPC请求的TCP主机端口值
    ;(例如127.0.0.1:9001)
    ; supervisorctl将使用XML-RPC 通过此端口与supervisord进行通信 。
    ; 要监听机器中的所有接口,请使用:9001或*:9001。
    ; 没有默认值, 只要 [inet_http_server] 开启了,就不许设置此项
    ;port=127.0.0.1:9001
    
    ; 下面两个和上面的uinx_http_server一个样。非必须设置
    ;username=user              
    ;password=123
    
    
    ; 这个部分主要是定义supervisord这个服务端进程的一些参数的
    ; 这个必须设置,不设置,supervisor 就不用干活了
    [supervisord]               
    
    ; 这个是supervisord这个主进程的日志路径,注意和子进程的日志没关系。
    ; 默认路径$CWD/supervisord.log,非必须设置
    logfile=/tmp/supervisord.log 
                
    ; 这个是上面那个日志文件的最大的大小,当超过50M的时候,会进行切割
    ; 当设置为0时,表示不限制文件大小
    ; 默认值是50M,非必须设置。
    logfile_maxbytes=50MB
                                   
    ; 日志文件保持的数量,上面的日志文件大于50M时,就会生成一个新文件
    ; 日志文件数量大于10时,最初的老文件被新文件覆盖,文件数量将保持为10
    ; 当设置为0时,表示不限制文件的数量
    ; 默认情况下为10,非必须设置
    logfile_backups=10           
                                   
    ; 日志级别,有critical, error, warn, info, debug, trace, or blather
    ; 请注意,在日志级别的 debug 中,supervisord日志文件将记录其子进程的
    ; stderr / stdout输出和关于进程状态更改的扩展信息信息,
    ; 这对于调试无法正常启动的进程很有用。
    ; 默认为info,非必须设置项
    loglevel=info
              
    ; supervisord的pid文件路径
    ; 默认为$CWD/supervisord.pid,非必须设置
    pidfile=/tmp/supervisord.pid 
                  
    ; 如果是true,supervisord进程将在前台运行
    ; 默认为false,也就是后台以守护进程运行,非必须设置
    nodaemon=false              
    
    ; 这个是最少系统空闲的文件描述符,低于这个值supervisor将不会启动。
    ; 查看系统的文件描述符 cat /proc/sys/fs/file-max
    ; 默认情况下为1024,非必须设置
    minfds=1024
                                   
    ; 最小可用的进程描述符,低于这个值supervisor也将不会正常启动。
    ; ulimit  -u这个命令,可以查看linux下面用户的最大进程数
    ; 默认为200,非必须设置
    minprocs=200
                                  
    ; 进程创建文件的掩码
    ; 默认为022,非必须设置项
    ;umask=022
    
    ; 这个参数可以设置一个非root用户,当我们以root用户启动supervisord之后,
    ; 当进行一些关键有意义的操作时候,会切换到此用户
    ; 我这里面设置的这个用户,也可以对supervisord进行管理
    ; 默认情况是不设置,非必须设置项
    ;user=chrism
    
    ; 这个参数是supervisord的标识符,主要是给XML_RPC用的。
    ; 当你有多个 supervisor的时候,而且想调用XML_RPC统一管理,
    ; 就需要为每个supervisor设置不同的标识符了
    ; 默认是supervisord。。。非必需设置
    ;identifier=supervisor
    
    ; 这个参数是当supervisord作为守护进程运行的时候,设置这个参数的话,
    ; 启动 supervisord 进程之前,会先切换到这个目录
    ; 默认不设置。。。非必须设置
    ;directory=/tmp              
    
    ; 这个参数当为false的时候,会在supervisord进程启动的时候,
    ; 把以前子进程产生的日志文件(路径为AUTO的情况下)清除掉。
    ; 有时候咱们想要看历史日志,当然不想日志被清除了。
    ; 所以可以设置为 true 
    ; 默认是false,有调试需求时可以设置为true非必须设置
    ;nocleanup=true
    
    ; 当子进程日志路径为AUTO的时候,子进程日志文件的存放路径。
    ;childlogdir=/tmp            
    
    ; 这个是用来设置环境变量的,supervisord在linux中启动默认继承了
    ; linux的环境变量,在这里可以设置supervisord进程特有的其他环境变量。
    ; supervisord启动子进程时,子进程会拷贝父进程的内存空间内容。
    ; 所以设置的这些环境变量也会被子进程继承。
    ; 小例子:environment=name="haha",age="hehe"
    ; 默认为不设置, 非必须设置
    ;environment=KEY="value"     
                                   
    ; 这个选项如果设置为true,会清除子进程日志中的所有ANSI 序列。
    ; 什么是ANSI序列呢?就是我们的
    ,	这些东西。
    ; 默认为false。。。非必须设置                      
    ;strip_ansi=false            
    
    ; 这个选项是给XML_RPC用的,当然你如果想使用supervisord
    ; 或者web server 这个选项必须要开启的
    [rpcinterface:supervisor]
    supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface 
    
    ;下面的部分主要是针对supervisorctl的一些配置 
    [supervisorctl] 
    ; 这个是supervisorctl本地连接supervisord的时候,
    ; 本地UNIX socket 路径,注意这个是和前面的[unix_http_server]对应的。
    ; 默认值就是unix:///tmp/supervisor.sock, 非必须设置
    serverurl=unix:///tmp/supervisor.sock
    
    ; 这个是supervisorctl远程连接supervisord的时候,
    ; 用到的TCP socket路径。
    ; 注意这个和前面的[inet_http_server]对应。
    ; 默认就是http://127.0.0.1:9001, 非必须项
    ;serverurl=http://127.0.0.1:9001 
    
     ; 用户名和密码
     ; 默认空, 非必须设置
    ;username=chris
    ;password=123
    
    ; 输入用户名密码时候的提示符
    ; 默认supervisor。。非必须设置
    ;prompt=mysupervisor
    
    ; 这个参数和shell中的history类似,我们可以用上下键来查找前面执行过的命令
    ; 默认是no file的, 所以我们想要有这种功能,必须指定一个文件, 
    ; 非必须设置
    ;history_file=~/.sc_history
    
    
    ; 这个就是要管理的子进程了,":"后面的是名字,最好别乱写和实际进程
    ; 有点关联最好。
    ; 这样的program我们可以设置一个或多个,
    ; 一个program就是要被管理的一个进程
    ;[program:theprogramname]      
                   
    ; 这个就是我们的要启动进程的命令路径了,可以带参数
    ; 例子:/home/test.py -a 'hehe'
    ; 有一点需要注意的是,我们的command只能是那种运行与前台的进程,
    ; 不能是守护进程。这个想想也知道了,比如说:
    ; command=systemctl start httpd。
    ; httpd这个进程被linux的systemed管理了,我们的supervisor再去启动这个命令
                                    这已经不是严格意义的子进程了。
                                    这个是个必须设置的项
    ;command=/bin/cat
    
    

    创建supervisor与redis的连接

    vi /etc/supervisord.d/redis.ini

    [program:redis-server]
    command=/usr/local/redis/bin/redis-server /usr/local/redis/bin/redis.conf
    priority=999                ; 优先级(越小越优先)
    autostart=true              ; supervisord启动时,该程序也启动
    autorestart=true            ; 异常退出时,自动启动
    startsecs=10                ; 启动后持续10s后未发生异常,才表示启动成功
    startretries=3              ; 异常后,自动重启次数
    exitcodes=0,2               ; exit异常抛出的是0、2时才认为是异常
    stopsignal=QUIT             ; 杀进程的信号
    
    ; 在程序发送stopignal后,等待操作系统将SIGCHLD返回给supervisord的秒数。
    ; 如果在supervisord从进程接收到SIGCHLD之前经过了这个秒数,
    ; supervisord将尝试用最终的SIGKILL杀死它
    stopwaitsecs=1
    user=root                   ; 设置启动该程序的用户
    log_stdout=true             ; 如果为True,则记录程序日志
    log_stderr=false            ; 如果为True,则记录程序错误日志
    logfile=/var/log/redis-server.log    ; 程序日志路径
    logfile_maxbytes=1MB        ; 日志文件最大大小
    logfile_backups=10          ; 日志文件最大数量
    
    

    接着去打开/etc/supervisord.conf中的配置,读取刚才的配置文件

    [include]
    files = /etc/supervisord.d/*.ini
    
    

    使用supervisor

    supervisorctl ,进入supervisor的终端,status(管理的服务的状态),start redis-6379(启动redis进程,在.ini文件中定义),restart(重启),stop(停止)

    supervisor status 同样是获得被管理进程的状态。其他参数与上面相同

    命令行键入supervisord 就能启动redis
    这样就避免了终端占用多的情况

    启动 Supervisor
    supervisord
    -c, --configuration 指定配置文件路径 (默认为/etc/supervisord.conf)
    -i, --interactive 执行命令后启动交互式shell
    -s, --serverurl URL upervisord服务器监听的URL(默认为“ http:// localhost:9001 ”)
    -u, --username 用于与服务器进行身份验证的用户名
    -p, --password 用于与服务器进行身份验证的密码
    -r, --history-file 保留readline历史记录(如果readline可用)
     
    supervisorctl 命令参数详解
    add <name> [...]
    激活进程/组的配置中的任何更新
    删除<name> [...]

    remove <name> [...]
    从活动配置中删除进程/组

    update
    重新加载配置,然后根据需要添加和删除(重新启动程序)

    clear <name>
    清除进程的日志文件。

    clear <name> <name>
    清除多个进程的日志文件

    clear all
    清除所有进程的日志文件

    fg <process>
    进入supervisor前台模式, 按Ctrl + C退出

    PID
    获得supervisord的PID。

    pid <name>
    按名称获取单个子进程的PID。

    pid all
    获取每个子进程的PID,每行一个。

    reread
    重新加载守护程序的配置文件,无需添加/删除(无重启)


    注意:restart不会重新读取配置文件。可以用reread和update
    restart <name>
    重新启动进程

    restart <gname>:*
    重新启动组中的所有进程

    restart <name> <name>
    重新启动多个进程或组

    restart all
    重新启动所有进程

    start <name>
    开启一个进程

    start <gname>:*
    启动组中的所有进程

    start <name> <name>
    启动多个进程或组

    start all
    开始所有进程

    status
    获取所有进程状态信息。

    status <name>
    按名称获取单个进程的状态。

    status <name> <name>
    获取多个命名进程的状态。

    stop <name>
    停止一个进程

    stop <gname>:*
    停止组中的所有进程

    stop <gname> <gname>
    停止多个进程或组

    stop all
    停止所有进程

    tail [-f] <name> [stdout | stderr](默认stdout)
    输出进程日志, Ctrl-C的退出。

    tail -100 <name> 是输出stdout的最后100 个字节 <name> stderr 是输出stderr的最后1600 个字节
    ————————————————
    版权声明:本文为CSDN博主「猴子饲养员」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
    原文链接:https://blog.csdn.net/youzi_yun/java/article/details/84934110

    使用中发现有redis-server停止后未重启的情况
    redis本身自带daemon,可查看redis自身配置文件:
    ################################ GENERAL  #####################################

    # By default Redis does not run as a daemon. Use 'yes' if you need it.
    # Note that Redis will write a pid file in /var/run/redis.pid when daemonized.
    daemonize yes
    1.使用中发现redis挂掉后并没有自动重启,自身守护未起作用;
    2.在未将redis配置的守护开关(daemonize yes)关闭的情况下,利用supervisor创建对redis的守护时,会引起冲突,可查看supervisor日志发现:    tail -f -n 200 /var/log/supervisor/supervisord.log
    2017-05-27 15:36:30,258 INFO gave up: redis-server entered FATAL state, too many start retries too quickly
    2017-05-27 15:40:30,170 INFO spawned: 'redis-server' with pid 48565
    2017-05-27 15:40:30,179 INFO exited: redis-server (exit status 0; not expected)
    2017-05-27 15:40:31,550 INFO spawned: 'redis-server' with pid 48573
    2017-05-27 15:40:31,557 INFO exited: redis-server (exit status 0; not expected)
    2017-05-27 15:40:34,431 INFO spawned: 'redis-server' with pid 48589
    2017-05-27 15:40:34,438 INFO exited: redis-server (exit status 0; not expected)
    2017-05-27 15:40:37,443 INFO spawned: 'redis-server' with pid 48591
    2017-05-27 15:40:37,450 INFO exited: redis-server (exit status 0; not expected)
    2017-05-27 15:40:38,451 INFO gave up: redis-server entered FATAL state, too many start retries too quickly
    这是由于supervisor和redis自身守护冲突引起。
    3.修改redis配置中的daemonize yes为no,关闭自身守护,改用supervisor执行守护;
    4.kill正在后台运行的redis-server;
    5.supervisorctl update ;
    6.supervisorctl start redis-server;
    7.相关链接:
            http://www.cnblogs.com/yjf512/archive/2012/03/05/2380496.html
            http://blog.csdn.net/win_turn/article/details/60466562
     
    另:在用supervisor启动redis前需要先kill掉redis的进程,否则启动失败。
    ————————————————
    版权声明:本文为CSDN博主「四月的水」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
    原文链接:https://blog.csdn.net/weixin_40238625/java/article/details/78992310


     

    翻译 朗读 复制 正在查询,请稍候…… 重试 朗读 复制 复制 朗读 复制 via 谷歌翻译(国内)

  • 相关阅读:
    ubuntu LAMP的安装
    windows中安装liunx虚拟机
    jQuery Responsive OneByOne Slider Plugin
    轮播图收集
    移动端图片延迟加载插件
    图片幻灯插件
    小tip: base64:URL背景图片与web页面性能优化
    基于HTML5的可预览多图片Ajax上传
    字体平滑解决方案
    webstorm scss编译css配置
  • 原文地址:https://www.cnblogs.com/xiondun/p/13364441.html
Copyright © 2011-2022 走看看