hive-调优笔记：JVM重用，并行执行、调整reducer个数的用处

一、JVM重用是hadoop调优参数的内容，对hive的性能具备很是大的 影响，特别是对于很难避免小文件的场景或者task特别多的场景，这类场景大多数执行时间都很短。hadoop默认配置是使用派生JVM来执行map和 reduce任务的，这是jvm的启动过程可能会形成至关大的开销，尤为是执行的job包含有成千上万个task任务的状况。jvm     JVM重用可使得JVM实例在同一个JOB中从新使

>>阅读原文<<