Spark 三种做业提交方式

Local 本地方式:直接在 IDEA 中运行程序,无需打包发布到集群中,方便测试。 Standalone 方式:Spark 原生的 Master/Worker 集群, Yarn 方式:Hadoop 的 Yarn 集群,recourseManager/NodeManager 集群,经过 Yarn 来进行资源的和管理调度。 本地方式是在本地 JVM 中启动一个进程来模拟运行环境,多个线程进行做业运行
相关文章
相关标签/搜索