一次spark做业执行后进程没法关闭的缘由及解决方案

最近运维的同窗频频反映，spark集群做业模式，每次执行完成spark的进程端口都已经关闭了，可是经过命令执行spark做业的进程和端口却没法自动关闭，严重影响其余业务组的做业运行，可是没法关闭的状况不是常常出现，出现频率也不规范，可是执行任务正常，数据清洗加工正常，存储正常，查看日志发现是在做业执行完成会执行sparksession.stop方法，是这个方法堵塞了进程的正常关闭，可是缘由从日志上

>>阅读原文<<