分佈式計算模式之流水線

前言 在分佈式領域中解決類似具有依賴關係的流水線作業的計算模式，叫作流水線計算模式。其實，流水線計算模式就是將一個任務拆分爲多個步驟（子任務），然後多個這樣的任務通過對步驟（子任務）的重疊執行，以實現數據並行處理的場景。 這種流水線模式在計算機領域中最先用於 CPU 指令設計，後來推廣到機器學習領域進行數據處理、模型訓練等。在流水線計算模式中，由於前一個子任務執行後，會扔給下一個子任務，由下一個子

>>阅读原文<<