Hive服務停止導致Flume收集數據到Hive後無法通過Hue使用分區查詢

首先要說明的是本篇所解決的問題 1、hive分區沒創建成功。 2、分區下面小文件過多。 3、合併小文件後新生成的文件沒有按指定格式壓縮。     數據流場景如下圖:   Hive分區按每小時4個每15分鐘生成一個的策略,也就是說每小時會有mm=00、mm=15、mm=30、mm=45 四個分區。 問題背景: 當時在通過Cloudera Manager做HDFS的HA操作,因此要停止Hive服務執行
相關文章
相關標籤/搜索