Spark 之 排错与优化

转自：http://blog.csdn.net/lsshlsw/article/details/49155087java 一. 运维 1. Master挂掉,standby重启也失效 Master默认使用512M内存，当集群中运行的任务特别多时，就会挂掉，缘由是master会读取每一个task的event log日志去生成spark ui，内存不足天然会OOM，能够在master的运行日志中看到，

>>阅读原文<<