HAWQ取代傳統數倉實踐(五)——自動調度工作流(Oozie、Falcon)

HAWQ取代傳統數倉實踐(五)——自動調度工作流(Oozie、Falcon)   一旦數據倉庫開始使用,就需要不斷從源系統給數據倉庫提供新數據。爲了確保數據流的穩定,需要使用所在平臺上可用的任務調度器來調度ETL定期執行。調度模塊是ETL系統必不可少的組成部分,它不但是數據倉庫的基本需求,也對項目的成功起着舉足輕重的作用。本篇說明如何使用HDP中的Oozie和Falcon服務實現ETL執行自動化。
相關文章
相關標籤/搜索