Spark从入门到精通第九课:Spark监控之history-server

一、每个SparkContext都会启动一个网页UI,这个网的UI上包含诸如stages/tasks/RDD/executor/配置环境/配置参数等一些许许多多的信息,它默认的地址是http://<driver_node>:4040,当咱们在一个机器上运行了多个SparkContext的时候,除了第一个SparkContext,其他的SparkContext的默认端口就变为404一、4042。。。
相关文章
相关标签/搜索