spark资源调度与yarn类比

spark资源调度与yarn类比:node master负责资源调度:就是决定在那些worker上启动executor,监控worker) ————>   yarn上的是resourcemanagerspa worker负责启动执行任务的进程(executor),而且监控executor,而且将当前机器的信息经过心跳汇报给master进程 ————>nodemanager资源 executor负责
相关文章
相关标签/搜索