使用spark streaming使用snappy壓縮保存數據到HDFS中

工做中須要將從Kafka中的數據保存到HDFS中去,而且須要使用snappy壓縮java 話很少說,直接上代碼apache /** * 自定義多目錄寫與追加寫,採用snappy壓縮 * @author demon * @version 2019/05/05 */ class AppendTextOutputFormat extends TextOutputFormat[Any, A
相關文章
相關標籤/搜索