Spark读取压缩文件

个人原创地址：https://dongkelun.com/2018/05/30/sparkGZ/html 前言 本文讲如何用spark读取gz类型的压缩文件，以及如何解决我遇到的各类问题。linux 一、文件压缩 下面这一部分摘自Spark快速大数据分析：   在大数据工做中，咱们常常须要对数据进行压缩以节省存储空间和网络传输开销。对于大多数Hadoop输出格式来讲，咱们能够指定一种压缩编解码器来

>>阅读原文<<