Multi-GPU computing by CUDA

CUDA實現多GPU調用 1、CUDA API 提供 cudaSetDevice(1) 函數切換GPU。而CPU只有一個線程控制一個GPU，默認是GPU(0)。通信拓撲結構如下圖： GPU0可以對GPU1的值獲取、傳輸；GPU1可以獲取主機值但是不能傳輸。 問題是：不能DeviceToDevice。 2、因此，考慮Peer-to-peer memory acces。cudaDeviceCanAcc

>>阅读原文<<