解析京東大數據下高效圖像特徵提取方案

本文主要分享英特爾和京東在基於Spark和BigDL的深度學習技術在搭建大規模圖片特徵提取框架上的實戰經驗。 背景 圖像特徵提取被廣泛地應用於相似圖片檢索，去重等。在使用BigDL框架（下文即將提到）之前，我們嘗試過在多機多GPU卡、GPU集羣上分別開發並部署特徵抽取應用。但以上框架均存在比較明顯的缺點： 在GPU集羣中，以GPU卡爲單位的資源分配策略非常複雜，資源分配容易出問題，如剩餘顯存不夠而

>>阅读原文<<