Spark任务执行者之Executor

        此次讲的是Executor,啥是Executor呢?Executor是干什么的?shell        当咱们在生产环境中提交spark做业时,用spark-submit shell脚本里,每每须要指定一个参数:--num-executors,你能够指定为3,5。。。这难道是随便指定的?爱设多少就设多少?很显然,答案是no,首先你得根据你集群的资源状况来设定。那咱们就有必要来弄清
相关文章
相关标签/搜索