hadoop 配置项的调优

dfs.block.size 决定HDFS文件block数量的多少(文件个数),它会间接的影响Job Tracker的调度和内存的占用(更影响内存的使用),java 两个推测式执行 mapred.map.tasks.speculative.execution=true mapred.reduce.tasks.speculative.execution=true 这是两个推测式执行的配置项,默认是

>>阅读原文<<