300字看懂的MapReduce原理

声明:本博文图片均出自网络,若侵权联系我删。 先上图。 作为hadoop的核心模块,首先切入点为mapreduce。 可以看出在MapReduce的执行过程分为两个任务一部分是map task 一部分是reduce task。,Inputformat函数主要的功能有两个第一个是数据切分,按照用户编写的MapReduce函数中的切分策略进行将数据进行切分,切成若干个split。第二个功能是将输入到m
相关文章
相关标签/搜索