Spark资源调度分配

1、任务调度与资源调度 任务调度:是指通过DAGScheduler,TaskScheduler,SchedulerBackend等进行的作业调度。 资源调度:是指应用程序获取资源。 任务调度是在资源调度的基础上,没有资源调度,那么任务调度就没有任何意义了。 2、分配Driver(只对cluster模式有效) Spark的Driver的运行有2种模式,一种是Client模式(Driver程序运行在客
相关文章
相关标签/搜索