多模態學習-基於文本和圖像信息的商品分類框架

將文本model和圖像model合併爲一個model，因爲它們包含了互補的信息。 對於圖像和文本數據，都是用CNN。對圖像數據，使用已經在Image-Net上訓練過的網絡，該網絡已經具有爲自然圖像提取豐富特徵的能力。利用預先訓練的機器學習模型稱爲轉移學習。對文本數據，使用一個預先在商品標題上訓練好的TextCNN模型。 利用預先訓練的機器學習模型對新場景重新訓練學習的過程稱爲轉移學習。 我們希望從

>>阅读原文<<