试用hadoop jvm复用配置

  Hadoop默认为每个task（map task 或者 reduce task） 启动一个jvm。 鉴于目前小文件过多的问题，设置了jvm复用，即一个job内，多个task共享jvm，避免多次启动jvm，浪费资源和时间。   测试Job信息： map：4715个 reduce：20个 input：  34G output:  25G     优化前：1464 s 优化后：1375 s Job运

>>阅读原文<<