Hive 压缩

Map输出压缩 开启map输出阶段压缩可以减少job中map和Reduce task间数据传输量。 示例： 开启hive中间传输数据压缩功能 hive (default)>set hive.exec.compress.intermediate=true; 开启mapreduce中map输出压缩功能 hive (default)>set mapreduce.map.output.compress=t

>>阅读原文<<