SPARK task执行与资源分配的关系

SPARK task执行与资源分配的关系 问题背景 执行spark某个sparkjob申请的资源是150个Executor，可是直至job执行结束（大约30多分钟），分配给该job的Executor个数是49个； 该job正常试行时间大约是14分钟，但因为这次分配该job的Executor个数少于150致使job执行过长大约30多分钟； 问题：为何没有得到足够的资源，job就开始执行了?css 问

>>阅读原文<<