关于spark通过idea提交任务到集群的操作,本地机器和远程的spark集群的网络不同的操作。...

今天在将本地idea当中的代码提交到远程的spark集群的时候,出现了下面的错误 看到这个错的第一反应就是集群本地和spark的通讯是不是正常的,因为我们通过本地提交任务的时候启动了spark_ui界面这个相当于在本地进行操作的,相当于spark的client。但是真正的执行者又是在集群当中。所以两者之间的 话的通讯是必须保持畅通的。 (本地提交到spark集群的代码的运行方式大致是这样的,其实他
相关文章
相关标签/搜索