Spark2.2源码之资源调度机制

#Spark2.2源码之资源调度机制java 注意:须要被分配资源的对象是:Driver,资源指的是Executor,Executor包含了cpu以及内存 。web 大概流程: Standalone和yarn client都是不须要注册的,会再本地启动Driver,因此这里讲的是yarn cluster模式。调度以前,确定是要拿到全部须要被调度的对象,因此应该看一下Driver的提交机制算法 一、
相关文章
相关标签/搜索