大数据生态圈中压缩的使用

1.前言 在时下大数据场景中,虽然现在的机器的性能好,节点多,但是不代表,我们的数据就不需要做任何的压缩就开始处理,所以我们还是会对数据做压缩处理的,本文会详细的介绍大数据中常见的压缩格式,以及常见压缩的对比,和使用场景; 2.常用压缩格式介绍及对比 2.1 常见压缩介绍 压缩格式 文件后缀 gzip .gz bzip2 .bz2 LZO .lzo Snappy .snappy 2.2 常用压缩格

>>阅读原文<<