62.Azure AI+機器學習綜合能力展示之視頻索引器

以前介紹了不少用於Demo的微軟Azure AI和機器學習的能力用於演示，此次介紹一個網站能夠用於強大的視頻分析：AMS視頻索引器

在這個網站能夠上傳一個本地視頻用於視頻分析，上傳成功後能夠根據這個視頻作不少不一樣維度的分析，好比這裏我從本地計算機上傳一個視頻後通過一會的分析檢索後就能夠點擊播放

播放後會看到分析出該視頻出現了多少我的，每個人出如今整個視頻的多少秒或一個區間，視頻中出現多少個話題

以及識別出該視頻出現了哪些出現頻率比較高的關鍵字；出現過的全部物體標籤，好比人，男人，外面，窗戶，牆等；還識別出視頻裏出現了什麼品牌，這些全部的標籤或品牌出如今視頻的多少秒或區間都標示出來，能夠快速點擊切換到這幾秒

還識別出整個視頻中的某一我的在這個視頻中情感是怎樣的，百分之多少是開心的等等

還識別出該視頻出現了多少個場景以及我選中的這我的物在整個視頻中出現的關鍵幀，這些均可以點擊去快進回退到出現該人的幀或秒

其次還在時間線裏能夠語音轉文本的方式實現整個視頻的字幕體現，隨着播放的語音而字幕自動滾動

而且還能夠對該文本翻譯成須要的須要顯示的語種來展現

固然還能夠查看各類標籤穿插在整個事件線裏的位置，以及編輯文本的內容進行內容修訂

最後還能夠下載腳本，看法，以及翻譯的txt文本等

若是下載VTT文件就能夠經過本地播放器在本地播放這個未經分析的源視頻配上字幕（選擇下載好的VTT文件）來一塊兒播放了，感受是否是很簡單

從這個視頻索引分析來看其實後端結合了多種微軟Azure的AI+機器學習的服務來綜合使用，例如用到了計算機視覺對別場景和物體等，人臉識別識別視頻中出現的人臉，用到了語音服務，對視頻裏本來沒有字幕的視頻配上英文字幕而且再結合翻譯服務將英文轉譯成你須要的語種，好比中文等，利用情感識別對視頻中的人物喜怒哀樂進行百分比的分類等，因此但從一個簡單的視頻就分析出多種維度不一樣的看法仍是很是有意思的。若是您感興趣也能夠本身動手來體驗感覺感覺。