Hadoop优化

1.MapReduce 跑的慢的原因 2.MapReduce优化方法 1.数据输入阶段 2.Map阶段 3.reduce阶段 4.I/O传输 5.数据倾斜问题及优化方法 6.常用的调优参数 (1)以下参数是在用户自己的MR应用程序中配置就可以生效(mapred-default.xml) 配置参数 参数说明 mapreduce.map.memory.mb 一个MapTask可使用的资源上限(单位:M
相关文章
相关标签/搜索