Spark学习(四)资源调度与任务调度的整合

文章目录 1、资源调度 2、任务调度 3、资源调度与任务调度整合 4、粗细粒度资源调度 一、什么是粗粒度资源调度? 二、什么是细粒度资源调度? 1、资源调度 一、待集群Spark集群启动成功后,Woker与Master通讯,此时Worker的各类信息(IP、port等)会存在Master中的wokers集合中,其数据类型是HashSet。此时Master会为各个Worker分配资源。web 二、当
相关文章
相关标签/搜索