Spark部署模式介绍

一、Local Local 模式是最简单的一种运行方式,它采用单节点多线程方式运行,不用部署,开箱即用,适合日常测试开发。在 shell 中有如下几种参数配置: local:只启动一个工作线程; local[k]:启动 k 个工作线程; local[*]:启动跟 cpu 数目相同的工作线程数。 二、Local-Cluster Local-Cluster 为本地集群模式,类似于 hadoop 的伪分
相关文章
相关标签/搜索