Spark任务执行过程简介

--executor-memory 每个executor使用的内存大小 --total-executor-cores    整个application使用的核数网络 1.提交一个spark程序到spark集群,会产生哪些进程?     SparkSubmit(也叫作Driver),主要做用是提交任务,也能够调度任务     Executor    用于执行须要计算的任务      2.在提交spa

>>阅读原文<<