IDEA远程提交运行HDFS的Spark程序

以前提交运行spark程序,都是经过spark-submit提交运行的。 可是能不能再IDEA中就执行submit运行程序呢, 之前用过一种方式,就是经过远程ssh访问(远程ssh能够经过JSch实现),经过liunx命令去执行,可是这个显然不是我指望的。linux 个人spark程序都是提交给yarn运行的,若是程序直接与yarn通讯,按spark-submit源码中的提交方式去作,是否是也能实
相关文章
相关标签/搜索