不是Azkaban囚徒而是開源Azkaban的介紹【無配置】

一、簡介 Azkaban是一個開源的批量工作流任務調度器 用於在一個工作流內以一個特定的順序運行一組工作和流程 Azkaban定義了一種KV文件格式來建立任務之間的依賴關係,並提供一個易於使用的web用戶界面維護和跟蹤你的工作流 二、工作流調度系統 1.爲什麼需要工作流調度系統 1 .一個完整的數據分析系統通常都是由大量任務單元組成: shell腳本程序,java程序,mapreducer程序,h
相關文章
相關標籤/搜索