MapReduce之mapper以及reducer的个数决定性因素

这个图大概能够描述mapreduce计算模型的执行过程，下面咱们就围绕这个图聊几个问题，其中有工做中很是有用的问题：app 1. mapper的个数  结论：mapper的个数是由输入数据的大小决定的，通常不须要咱们去设置，若是你想控制mapper的个数，那么须要先了解hadoop是怎么控制mapper的个数。  如图所示，每一个Mapper Tasker对应一个split（切片）,要处理的fil

>>阅读原文<<