Spark - 使用Yarn管理器开启历史日志服务、查看日志

前言 使用Yarn 作为集群管理器，启动Spark 时，无法再从SparkUI-4040 端口查看相应的信息。只能从Hadoop 的Yarn、历史服务器查看，但是默认是没有开启。所以，这里展示如何配置开启历史服务器、查看日志。 Hadoop-2.7.3 Spark-2.4.0 1. HDFS 配置 确保你的Hadoop 已经完成配置，并且已经能够正常启动。 下面，在已有的Hadoop 配置上，增加

>>阅读原文<<