AirFlow介紹

介紹  Airbnb開源的一款調度工具,核心特徵是分佈式、基於工作流,此外還提供了UI方便管理和監控,可看做crontab的升級版,功能更加豐富和完善; 核心概念 DAG:WorkFlow的定義,調度的基本單元,由若干存在依賴關係的Task組成; Task:DAG中一個節點,即具體的某個調度任務; Operator:任務的定義,包括任務類型、執行邏輯等等; 架構圖  Master-Slave架構,
相關文章
相關標籤/搜索