分佈式Tensorflow

分佈式TensorFlow 分佈式Tensorflow是由高性能的gRPC框架作爲底層技術來支持的。這是一個通信框架gRPC(google remote procedure call)，是一個高性能、跨平臺的RPC框架。 RPC協議，即遠程過程調用協議。是指通過網絡從遠程計算機程序上請求服務。 分佈式原理： 單機多卡是指單臺服務器有多塊GPU設備。假設一臺機器上有4塊GPU，單機多GPU的訓練過程

>>阅读原文<<