Apache Spark 3.0 將內置支持 GPU 調度

如今大數據和機器學習已經有了很大的結合，在機器學習裏面，因爲計算迭代的時間可能會很長，開發人員一般會選擇使用 GPU、FPGA 或 TPU 來加速計算。在 Apache Hadoop 3.1 版本里面已經開始內置原生支持 GPU 和 FPGA 了。作爲通用計算引擎的 Spark 肯定也不甘落後，來自 Databricks、NVIDIA、Google 以及阿里巴巴的工程師們正在爲 Apache Sp

>>阅读原文<<