Hive的数据压缩

在实际工作当中,hive当中处理的数据,一般都是需要经过压缩,前期我们在学习hadoop的时候,已经配置过hadoop的压缩, 这里的hive也是一样,可以使用压缩来节省我们的额MR的处理的网络带宽。   为了支持多种压缩/解压缩算法,Hadoop引入编码/解码器, 压缩配置参数: 要在Hadoop中启用压缩,可以配置如下参数(mapred-site.xml文件中) 开启Map输出阶段压缩: 开启
相关文章
相关标签/搜索