Uber 開源深度學習分佈訓練庫 Petastorm

開發四年只會寫業務代碼，分佈式高併發都不會還做程序員？   Uber 近日宣佈開源 Petastorm，這是由 Uber ATG 開發的數據訪問庫，可直接基於數 TB 的 Apache Parquet 格式數據集進行單機或分佈式訓練和深度學習模型評估。Petastorm支持流行的基於Python的機器學習（ML）框架，如 Tensorflow、Pytorch 和 PySpark ，也可以直接用在

>>阅读原文<<