Hive表數據出庫到elasticsearch(ES)速度

項目背景oop      天天須要批量更新商品屬性相關的數據用來檢索,因爲數據量比較大,天天的數據都是上億量級的記錄,考慮到檢索速度的要求,選用ES來檢索。可是數據都是在hadoop上,索引用hive到同步到ES的技術來完成。此篇主要是對任務完成速度的介紹spa 圖1是hive同步的任務,一共6個任務,上面有任務開始時間、結束時間。圖2是ES集羣的監控,監控數據插入到ES的速度。下面結合這兩幅圖簡
相關文章
相關標籤/搜索