Nifi 刪除hdfs上的歷史數據

之前通過 nifi 每隔幾分鐘將數據庫中的數據 寫入到 hdfs上,不過後面數據中小文件過多,因爲需要刪除歷史的數據,所幸寫入hdfs的時候都是 table_name/分區鍵 寫入的。因此只要刪除歷史的分區文件夾就可以完成數據的刪除操作了。 ex: /user/hive/warehouse/zhong/ge_sys_person/pt=20190203/.... /user/hive/wareho
相關文章
相關標籤/搜索