【3.7】Hadoop数据压缩

1. 概述 压缩概述 压缩策略和原则 2. MR支持的压缩编码 为了支持多种压缩/解压缩算法,Hadoop 引入了编码/解码器,如下表 压缩性能的比较 3.压缩方式选择 Gzip压缩 Bzip2压缩 Lzo压缩 Snappy压缩 4.压缩位置选择 压缩可以在MapReduce作用的任意阶段启用 5.压缩参数配置 要在Hadoop中启用压缩,可以配置如下参数:
相关文章
相关标签/搜索