Hadoop之企业优化

MapReduce跑的慢的原因 MapReduce程序效率的瓶颈在于两点： 1、计算机性能 cpu、内存、网络、磁盘健康 2、I/O操作优化 （1）、数据倾斜 （2）、Map和Reduce数设置不合理 （3）、Map运行时间太长，导致Reduce等待时间太久 （4）、小文件过多 （5）、大量的不可切分的超大文件 （6）、溢写次数过多 （7）、Mager次数过多等 MapRedeuce的优化方法 M

>>阅读原文<<