Spark调度系统——概述

简单来讲,Spark调度系统用于将用户提交的“任务”调度到集群中的不同节点执行。但是Spark实现的调度系统,并非一句话所概括的这么简单。Spark资源调度分为两层:第一层是Cluster Manager(在YARN模式下为ResourceManager,在Mesos模式下为Mesos Master,在Standalone模式下为Master),将资源分配给Application;第二层是Appl
相关文章
相关标签/搜索