構建大數據ETL通道--Json數據的流式轉換--Json轉Parquet(三)

若是生成的日誌數據是Avro格式,可直接採用上一篇的方式( http://www.javashuo.com/article/p-almztkej-gu.html),將Avro數據轉儲爲Parquet。可是咱們通常都是日誌數據不是Avro,大部分是Json數據。所以,本篇主要講如何將Json經過Morphline流式轉儲爲Parquet數據。文章中只是簡單的例子,在實際生產環境中,咱們的Json數據
相關文章
相關標籤/搜索