吊打面试官之mapreduce原理

mapreduce原理 1.有一个待处理的大数据，被划分为大小相同的数据块(如64MB),及与此相应的用户作业程序 2.系统中有一个负责调度的主节点(Master),以及数据Map和Reduce工作节点(Worker) 3.用户作业程序提交给主节点 4.主节点为作业程序寻找和配备可用的Map节点，并将程序传送 5.主节点也为作业程序寻找和配备可用的Reduce节点，并将程序传送给Reduce节点

>>阅读原文<<