洞見 | 生成對抗網絡GAN最近在NLP領域有哪些應用

                剛做完實驗,來答一答自然語言處理方面GAN的應用。 直接把GAN應用到NLP領域(主要是生成序列),有兩方面的問題: 1. GAN最開始是設計用於生成連續數據,但是自然語言處理中我們要用來生成離散tokens的序列。因爲生成器(Generator,簡稱G)需要利用從判別器(Discriminator,簡稱D)得到的梯度進行訓練,而G和D都需要完全可微,碰到有離散變量
相關文章
相關標籤/搜索