MapReduce性能调优记录

MapReduce原理 要知道怎么对MapReduce做业进行调优前提条件是须要对Map-Reduce的过程了然于胸。 Map-Reduce运行原理图： html Map Side 1.从磁盘读取数据并分片java 默认每一个block对应一个分片，一个map tasknode 2.进行map处理算法 运行自定义的map业务过程apache 3.输出数据到缓冲区中缓存 map输出的数据并非直接写入

>>阅读原文<<