在本地将spark做业运行到远程集群

在本地IDE里直接运行spark程序操做远程集群web 通常运行spark做业的方式有两种:数据库 本机调试,经过设置master为local模式运行spark做业,这种方式通常用于调试,不用链接远程集群。ruby 集群运行。通常本机调试经过后会将做业打成jar包经过spark-submit提交运行。生产环境通常使用这种方式。maven 本文介绍第3种方式:分布式 在本地将spark做业运行到远程
相关文章
相关标签/搜索