從0到1搭建大數據平臺之調度系統(建議收藏)

目前大數據平臺經常會用來跑一些批任務，跑批處理當然就離不開定時任務。比如定時抽取業務數據庫的數據，定時跑hive/spark任務，定時推送日報、月報指標數據。任務調度系統已經儼然成爲了大數據處理平臺不可或缺的一部分。 一、原始任務調度 記得第一次參與大數據平臺從無到有的搭建，最開始任務調度就是用的Crontab，分時日月周，各種任務腳本配置在一臺主機上。crontab 使用非常方便，配置也很簡單。

>>阅读原文<<