spark 应用输出debug日志

问题: yarn container 大量输出debug日志 –> 磁盘写满 –> nodemanager 识别该盘为bad disk -> 停止服务 -> spark task lost 。 container stdout: 排错过程： 查看spark log4j文件，yarn log 级别，应用代码是否设置日志级别，均无异常。 发现driver，executor日志输出表现不一致（drive

>>阅读原文<<