Mapreduce基本工做流程

MapReduce分布式计算框架 基本流程: 1,大数据经split划分红大小相等的数据块(数据块的大小通常等于HDFS一个块的大小)以及用户做业程序。 2,系统中有一个负责调度的Master节点和许多的Map工做节点,Reduce工做节点 3,用户做业程序提交给Master节点,Master节点寻找合适的Map节点,并将数据传给Map节点,而且Master也寻找合适的Reduce节点并将数据传给
相关文章
相关标签/搜索