MapReduce优化

对Hadoop,MapReduce的优化主要在四个方面 CPU 因为mapper和reducer数量依赖于每项任务CPU利用率。因此可在mapred-site.xml里根据每台机器设置map和reduce数量。经过设置mapred.tasktracker.map.tasks.maximum定义tasktracker同时运行map最大数,mapred.tasktracker.reduce.tasks
相关文章
相关标签/搜索