Horovod

時間 2020-12-23

原文原文鏈接

Horovod是一個支持TensorFlow、Keras、PyTorch和Apache MXNet的分佈式訓練框架。Horovod的目標是讓分佈式深度學習更快更易用。爲啥不用原生的TensorFlow分佈式訓練？ 1、代碼改動多少？ 2、比原生的分佈式訓練快多少？ Horovod用的MPI比分佈式TensorFlow用的parameter servers，簡單直接得多。而且，Horovod更

>>阅读原文<<

1. Horovod
2. horovod + tf.train.CheckpointSaverHook
3. horovod相關
4. horovod安裝
5. Horovod 通訊策略
6. horovod安裝及PyCharm
7. Horovod安裝和使用
8. Horovod源碼剖析（一）
9. horovod tensorflow 分佈式多gpu
10. Distributed Training using Apache MXNet with Horovod
更多相關文章...

相關標籤/搜索

horovod