flume讀取json格式的log文件寫入hive表,趟坑記錄

flume 讀取log日誌文件,寫hive表 注意: hive創建桶表; flume讀取文件,按行讀取,默認行最大值爲2048個長度,過長會截取。 測試階段,注意刪除寫入文件目錄(spoolDir)、checkpoint目錄、寫入的hive表記錄,避免歷史數據對結果的影響;     如果不是桶表:異常報錯如下 Unexpected end-of-input in VALUE_STRING   由於
相關文章
相關標籤/搜索