spark on yarn图形化任务监控利器：History-server帮你理解spark的任务执行过程

在spark on yarn任务进行时，大家都指导用4040端口监控（默认是，设置其他或者多个任务同时会递增等例外）; 辣么，任务结束了，还要看图形化界面，那就要开history-server了。CDH安装spark on yarn的时候，就自动安装了history的实例。 现在不用CDH自带的spark（版本太久了），自己安装spark新版，所以还得具体配置。 搜了一下帖子，2个步骤： spar

>>阅读原文<<