Azkaban 簡介

一、Azkaban 介紹 1.1 背景 一個完整的大數據分析系統，必然由很多任務單元 (如數據收集、數據清洗、數據存儲、數據分析等) 組成，所有的任務單元及其之間的依賴關係組成了複雜的工作流。複雜的工作流管理涉及到很多問題： 如何定時調度某個任務？ 如何在某個任務執行完成後再去執行另一個任務？ 如何在任務失敗時候發出預警？ … 面對這些問題，工作流調度系統應運而生。Azkaban 就是其中之一。

>>阅读原文<<