Azkaban整理

一、Azkaban簡介        Azkaban是由Linkedin開源的一個批量工作流任務調度器。用於在一個工作流內以一個特定的順序運行一組工作和流程。Azkaban定義了一種KV文件格式來建立任務之間的依賴關係,並提供一個易於使用的web用戶界面維護和跟蹤你的工作流。簡而言之就是一個工作流調度系統。   爲什麼需要工作流調度系統?     因爲一個完整的數據分析系統通常都是由大量任務單元組
相關文章
相關標籤/搜索