HBASE将来可期的数据压缩算法之ZSTD

tl;dr(太长不读):git zstd是Facebook在2016年开源的新无损压缩算法,优势是压缩率和压缩/解压缩性能都很突出。 在咱们测试的文本日志压缩场景中,压缩率比gzip提升一倍,压缩性能与lz四、snappy至关甚至更好,是gzip的10倍以上。 zstd还有一个特别的功能,支持以训练方式生成字典文件,相比传统压缩方式能大大的提升小数据包的压缩率。 在过去的两年里,Linux内核、H
相关文章
相关标签/搜索