hadoop 核心注意事项 小总：maptask并行机制 reduce并行机制 task并行 数据倾斜 shuffle

标题hadoop 核心注意事项 小总 一 .maptask的并行机制（逻辑切片） maptask 的数量取决于 一般取决于 切片的数量。有多少切片就有多少maptask。 maptask 的数量主要取决于三个方面： 1.文件的大小及数量。 2.blocksize的大小 3.以及splip（块） size 大小 时间：是在mr客户端提交程序到yarn之前。 地点：mr程序客户端（main方法） 参与

>>阅读原文<<