embedding與word2vec

embedding是指將 目標向量化，常用於自然語言處理（如：Word2Vec）。這種思想的意義在於，可以將語義問題轉換爲數值計算問題，從而使計算機能夠便捷處理自然語言問題。如果採用傳統的One-hot編碼，每個單詞之間相互獨立，此時詞向量之間相互正交，編碼無法反映單詞之間的關聯關係。而embedding可以理解爲是將One-hot編碼的高維向量，降維到一個較低維度的空間，在這個空間中不同單詞之間

>>阅读原文<<