分布式资源调度框架YARN总结

1.产生背景 Hadoop1.x时: MapReduce:Master/Slave架构,1个JobTracker带多个TaskTracker JobTracker: 负责资源管理和作业调度 TaskTracker: 定期向JT汇报本节点的健康状况、资源使用情况、作业执行情况; 接收来自JT的命令:启动任务/杀死任务 产生问题:单点故障,节点压力大不易扩展 YARN:不同计算框架可以共享同一个HDF
相关文章
相关标签/搜索