Hive实践分享之存储和压缩的坑

在学习大数据技术的过程当中，HIVE是很是重要的技术之一，但咱们在项目上常常会遇到一些存储和压缩的坑。程序员 你们都知道，因为集群资源有限，咱们通常都会针对数据文件的「存储结构」和「压缩形式」进行配置优化。在我实际查看之后，发现集群的文件存储格式为Parquet，一种列式存储引擎，相似的还有ORC。而文件的压缩形式为Snappy。具体的操做形式以下：整理了一份2018年合适程序员学习的大数据的学习

>>阅读原文<<