Spark应用程序的监控方式

4040端口 可以在浏览器中打开http://:4040网址，网址显示的信息：  任务和调度状态的列表  RDD大小和内存使用的统计信息  正在运行的executor的信息  环境信息  如果在同一台机器上有多个SparkContext正在运行，那么他们的端口从4040开始依次增加（4041，4042等）。 在应用程序运行期间，你可以在这个Web页面获得Spark实时监控信息，如果希望在程序运行完

>>阅读原文<<