ELK 服务端程序启停自动管理工具之supervisor

一，说说来龙去脉

说说痛点，elasticsearch,kafka,zookeeper,kibana,elasticsearch-head,logstash，logstash是须要常常重启的，你上了点过滤规则或者修改点啥的，每次都尼玛杀进程，再nohup ，还看不到日志，这太不符合人性了，人性的优势之一就是懒惰。打开web 界面，点一下鼠标解决问题岂不是棒棒哒，还能经过web 界面看看后台日志，perfect！子曰：“工欲善其事，必先利其器。” 开搞！
supervisor运行的系统：centos 7
supervisor version：3.3.4

二，Supervisor 简介及优点

Supervisor 简介：
Supervisor is a client/server system that allows its users to monitor and control a number of processes on UNIX-like operating systems.
Supervisor 是个c/s 架构的系统，它容许用户在类Unix 系统上管理和监控必定数量的程序运行；
你有没有不少源码安装的程序？你怎么启动这些程序？nohup 是否是？仍是screen？仍是& 后台？仍是自练神功，写一堆启动脚本呢？即便是这样你的程序由于bug或者其它缘由down了呢？仍是须要你手动去启动是不？
当你了解supervisor以后你就知道，什么叫磨刀不误砍柴工了！supervisor 有哪几个niubility的功能呢？
1，程序启动，中止，重启统一管理，提供web和命令行方式；
2，程序down掉自动拉起；
3，能够指定启动用户，安全方面杠杠滴；
4，能够定义group 重启，和启动；
5，web 界面管理很是方便，毕竟点点鼠标就搞定了的事情，谁不肯意呢？

三，正式开搞

#supervisor 是用Python写的程序，因此能够经过easy_install 来安装，也能够用pip 来安装，这个看本身了；
#我习惯用pip 装东西，因此用easy_install 安装pip
easy_install pip
#以后经过pip 安装supervisor
pip install supervisor

#为supervisor建立工做目录与配置文件目录而且赋予该目录755 的权限；
mkdir -m 755 -p /etc/supervisor/conf.d

#经过supervisor 提供的 echo_supervisord_conf 命令生成默认配置文件、
echo_supervisord_conf > /etc/supervisor/supervisord.conf
#经过cat 命令查看配置文件是否生成；

cat /etc/supervisor/supervisord.conf |grep -v "^;" |grep -v "^$"
[unix_http_server]
file=/tmp/supervisor.sock   ; the path to the socket file
[inet_http_server]         ; inet (TCP) server disabled by default  #是否开启web 管理界面
port=ip:9001        ; ip_address:port specifier, *:port for all iface  #web 访问端口；
username=user          ; default is no username (open server)  #web 界面访问用户名；
password=password              ; default is no password (open server)  #web 界面访问密码；
[supervisord]
logfile=/tmp/supervisord.log ; main log file; default $CWD/supervisord.log  #日志存放路径
logfile_maxbytes=50MB        ; max main logfile bytes b4 rotation; default 50MB  #日志大小
logfile_backups=10           ; # of main logfile backups; 0 means none, default 10  #日志滚动多少次
loglevel=info                ; log level; default info; others: debug,warn,trace   #log 级别
pidfile=/tmp/supervisord.pid ; supervisord pidfile; default supervisord.pid  #pid 文件
nodaemon=false               ; start in foreground if true; default false  #是否在前台启动，默认是false，即以 daemon 的方式启动
minfds=1024                  ; min. avail startup file descriptors; default 1024 #能够打开的文件描述符的最小值，默认 1024
minprocs=200                 ; min. avail process descriptors;default 200       #能够打开的进程数的最小值，默认 200
[rpcinterface:supervisor] 
supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface 
[supervisorctl]
serverurl=unix:///tmp/supervisor.sock ; use a unix:// URL  for a unix socket    #经过UNIX socket链接supervisord，路径与unix_http_server部分的file一致
[include] 
files =/etc/supervisor/conf.d/*.conf  #引入额外的配置文件

#放到/etc/supervisor/conf.d/ 的xxx.conf配置文件

[program:logstash-pack]   #是被管理的进程配置参数，xx是进程的名称，经过supervisorctl 管理程序的时候和web 界面使用
command = /usr/local/logstash/bin/logstash -f /usr/local/logstash/config/logstashx.conf 
[program:kafka]
command = /usr/local/kafka/bin/kafka-server-start.sh /usr/local/kafka/config/server.properties
[program:kibana]
command = /usr/local/kibana/bin/kibana
[program:elasticsearch]
command = /usr/local/elasticsearch/bin/elasticsearch
autostart = true              # 被管理程序在supervisord启动的时候也自动启动
autorestart = true           #程序退出后自动重启,可选值：[unexpected,true,false]，默认为unexpected，表示进程意外杀死后才重启
startsecs = 5                   #启动5秒后没有异常退出，就表示进程正常启动了，默认为1秒
startretries = 3                 #启动失败重试几回，默认3次
user = elk                        #启动用户这个是为了安全起见
redirect_stderr = true       #把stderr重定向到stdout，默认false
stdout_logfile=/data/logs/elk/logstash-shipper-std.log   #stdout 日志文件大小，默认50MB  须要手动建立目录，而且赋予elk的权限
stderr_logfile=/data/logs/elk/logstash-shipper-err.log     #stdout 日志文件备份数，默认是10 须要手动建立目录，而且赋予elk的权限

四，启动验证supervisor

#配置文件搞定了，能够启动supervisor了
supervisord -c /etc/supervisor/supervisord.conf

#supervisor 的管理是经过supervisorctl 管理，能够经过命令带参数形式例如：suervervisorctl shutdown ,也能够经过进入交互模式进行管理，例如supervisorctl 回车，以后执行命令便可；
#参考启动的程序
supervisor status
第一行是自定义的名字； 第二个是运行状态，第三是pid ，第三行是启动时间

#关闭supervisor
supervisorctl shutdown
#从新载入supervisor，从新载入supervisor，在这里至关于重启supervisor服务，里面的服务也会跟着从新启动
supervisor reload
#添加/删除 要管理服务，当你修改了配置文件，能够直接经过update 方式升级便可
supervisor update

#经过命令方式启动全部服务或者单个服务
supervisorctl start all
supervisorctl start service_name
#关闭服务
supervisorctl stop all
supervisorctl stop service_name
#重启全部服务或者单个服务
supervisorctl restart all
supervistorctl restart service_name
看图说话web 管理界面：