启动spark任务报错:ERROR SparkUI: Failed to bind SparkUI

       当启动一个spark任务的时候,就会占用一个端口,默认为4040,从日志能够看到当端口被占用时,它会默认依次增长16次到4056,若是仍是失败的话,就会报错退出。app 解决方法:spa 1. 使用spark-submit提交任务时,在脚本中加配置:--conf spark.port.maxRetries=128(亲测有效)日志 2. 在代码中初始化SparkConf时,设置conf
相关文章
相关标签/搜索