MDDR:Multimodal Dialogue Dense Retriever模型

MDDR:能夠實現文本或圖片兩種模態多輪對話的檢索,通過對海量多模態歷史交互信息的檢索召回與排序,實現對當前問題的應答。模型結構見下圖。 模型子模塊: 閒聊分類模塊: 針對多輪對話場景,判斷當前用戶問題是否含有充足的業務信息。在對話過程中,系統會使用該模塊對用戶問題進行判斷,如果當前信息不足以進行有意義的應答,則系統會加上上一輪的用戶問題,進行檢索召回。該模塊示例使用fasttext模型實現,並隨
相關文章
相關標籤/搜索