构建大数据ETL通道--Json数据的流式转换--Json转Parquet(三)

若是生成的日志数据是Avro格式,可直接采用上一篇的方式( http://www.javashuo.com/article/p-almztkej-gu.html),将Avro数据转储为Parquet。可是咱们通常都是日志数据不是Avro,大部分是Json数据。所以,本篇主要讲如何将Json经过Morphline流式转储为Parquet数据。文章中只是简单的例子,在实际生产环境中,咱们的Json数据
相关文章
相关标签/搜索