Flume-將數據寫入動態分區表

一、 場景描述 實時監控文件目錄，將目錄中的實時產生的數據文件（文件內容非動態）寫入動態分區，分區爲3級（設備ID/文件產生日期/文件產生的時間（h））.文件名格式如下（日期+時間+產品ID.txt） 二、 主要存在的難點 由於flume只支持傳入一些簡單的參數變量（時間/日期/文件名等），所以這裏我們如果想動態的識別我們的文件名並直接生成sink的路徑及相應文件名有困難。 三、 解決方法 這裏我

>>阅读原文<<