基于Spark streaming的SQL服务实时自动化运维

设计背景 spark thriftserver目前线上有10个实例，以往经过监控端口存活的方式很不许确，当出故障时进程不退出状况不少，而手动去查看日志再重启处理服务这个过程很低效，故设计利用Spark streaming去实时获取spark thriftserver的log，经过log判断服务是否中止服务，从而进行对应的自动重启处理，该方案能达到秒级 7 * 24h不间断监控及维护服务。mysql

>>阅读原文<<