Azkaban 系列(一)—— Azkaban 簡介

一、Azkaban 介紹 1.1 背景 一個完整的大數據分析系統,必然由很多任務單元(如數據收集、數據清洗、數據存儲、數據分析等)組成,所有的任務單元及其之間的依賴關係組成了複雜的工作流。複雜的工作流管理涉及到很多問題: 如何定時調度某個任務? 如何在某個任務執行完成後再去執行另一個任務? 如何在任務失敗時候發出預警? … 面對這些問題,工作流調度系統應運而生。Azkaban就是其中之一。 1.2
相關文章
相關標籤/搜索