短時間爆發仍是將來趨勢？騰訊雲海量音視頻通訊服務背後的技術發展

面臨特殊時期，不管遠程辦公、仍是學校「停課不停學」都成爲時下的必然選擇，衆多視頻會議平臺也在特殊環境下開啓了短時間免費開放及功能服務。但與此同時不可避免會帶來突發的大規模在線視頻與協做需求與流量衝擊，面對高併發、高可用、高性能的挑戰，平臺背後技術如何支持？將來趨勢會在哪裏？咱們邀請到騰訊雲視頻通訊業務總經理李鬱韜分享騰訊雲在編解碼、視頻網絡傳輸等方面技術優化。

文 / Tommy

策劃 / LiveVideoStack

LiveVideoStack：Tommy你好，距離上次採訪你過去了一年多的時間，騰訊視頻雲產品發生了哪些變化？

李鬱韜：視頻雲這一年變化還真挺大的，首先從業務上，咱們基本對接了市場上絕大部分客戶的直、點播的客戶，大盤的業務量增加比較明顯，目前在總體帶寬、音視頻通話時長基本上翻了一倍。

在產品矩陣方面，咱們在持續夯實咱們流量型PaaS平臺的同時，也推出了很多新的業務產品，包括更低延遲表現的快直播產品、此次雷神山雲監工上用到的慢直播產品、面向製做域的騰訊雲剪及雲導播臺產品、針對企業培訓及商業直播場景的直播SaaS產品，另外，咱們也將咱們視頻AI的產品能力升級爲了「視頻智能」產品家族。

在騰訊內部，視頻雲已經成爲了騰訊視頻業務事實上的中臺，微信、企業微信、騰訊會議、騰訊教育等絕大部分視頻產品已經跑在了咱們視頻中臺上，在內部，咱們也積極推進公司內部各類視頻開源協同項目，推進效率提高及技術共享。另外，在下一代音視頻編解碼、音視頻傳輸協議、音視頻先後處理算法等方面，咱們也在推進各技術開源社區的建設。

融合直播技術與微信生態，打通全平臺PaaS+SaaS服務

LiveVideoStack：咱們觀察到小程序上支持課程開播，大大簡化了教學直播的流程，也能夠快速加入騰訊會議。除此以外，小程序的多媒體服務上還有哪些期待呢？

李鬱韜：小程序雲直播解決方案是咱們融合騰訊雲直播技術與微信生態優點，提供的雲端直播能力及全平臺打通的直播PaaS服務，將直播能力注入各業務場景，助力企業快捷實現小程序直播。提供經微信官方認證的小程序直播插件，引入插件就能快速便捷地將直播能力植入自有的微信小程序中。在此次疫情期間，直播除了以前泛娛樂場景外，也更多進入了人們的生產、生活場景中。

另外，咱們也聯合合做夥伴，上線了針對企業內訓等場景的SaaS解決方案：騰訊雲歡句直播，這是爲企業提供更輕量的小程序一站式SaaS直播服務，助力企業獲取觀衆多方位畫像，提高線上培訓及銷售跟進效果；在直播中支持將PPT等文檔同步展現給觀衆，形式上也支持紅包等功能，互動性更強。直播結束後自動生成回放視頻，觀看回放時PPT演示與視頻同步播放。

LiveVideoStack：是否向海外用戶開放騰訊雲視頻雲的能力，好比小程序直播、H5直播等？

李鬱韜：目前已經在向海外用戶開放騰訊視頻雲的相關能力，以【多中心點部署】在中國香港，泰國，新加坡，德國，多倫多，硅谷，俄羅斯，南非，韓國等地都已完成多箇中心機房建設，並在逐漸擴大中心機房建設覆蓋國家區域。

爲了應對海外國家內部網絡雜，海外國家跨國網絡質量不一，減小卡頓，提供穩定可靠的服務，對於海外直播場景，騰訊雲從架構、網絡、安全、資源等方面針對性地進行了優化。

依託於騰訊雲的出海戰略和長期在海外的投入，在全球50多個國家和地區建設超過1300個傳輸節點，總帶寬儲備超100T，與超過50家全球運營商合做，海外加速點200+。

想體驗或使用的朋友，如今能夠在雲直播控制檯直接開啓。

騰訊自研網絡傳輸協議+V265編碼技術，全面提高用戶體驗

LiveVideoStack：去年12月看到騰訊會議的發佈會，2月初就遇到「全國人民都在遠程工做」的挑戰，如何在短期內給予騰訊會議更好的支持的？與此同時，如何保障其餘服務質量不下降，有哪些經驗能夠和你們分享？

李鬱韜：爲了保證複雜網絡環境下多端接入方式中的音視頻傳輸質量，騰訊會議採用了咱們在音視頻領域長期積累的雲流控引擎技術，經過融合經典信號處理、心理聽覺和深度學習理論，針對端到端音視頻通訊鏈路上的複雜特性，繼承了在微信、QQ、王者榮耀等大型業務中多年沉澱的探測、選路、調度、傳輸等關鍵技術，對音視頻在雲端和用戶終端的網絡傳輸環境進行實時探測計算，選擇最優網絡路徑進行傳輸。

同時，騰訊自研的網絡傳輸協議和V265編碼技術，在下降音視頻傳輸過程當中丟包率的同時，還能保證在屏幕分享場景和在不一樣終端上的視頻清晰度，保證用戶的會議使用體驗。

在質量評估方面，騰訊會議還藉助騰訊多媒體實驗室上百個符合ITU/3GPP/AVS等國內外標準的指標進行評判。爲了更好的衡量QoE，騰訊多媒體實驗室構建了大規模音視頻主觀質量數據庫，並基於這些數據來研發客觀質量評估算法，而後部署到業務線中，閉環監控全網的用戶體驗質量。

另外，用戶在使用騰訊會議時，廣泛感受環境雜音較少。這個體驗一樣得益於騰訊雲音視頻在降噪方面的技術積累。騰訊會議考慮到遠程會議的環境多樣性，針對多人、多場景實時通訊系統中的3A問題（降噪、回聲抑制、增益控制），進行智能化降噪處理，讓與會者克服噪音干擾，得到專一的會議環境。

LiveVideoStack：騰訊雲視頻雲團隊是如何應對用戶使用量暴增的狀況的？好比經過「降級服務」保證用戶的基本服務，好比使用延遲更高的RTMP替代WebRTC低延遲線路？

李鬱韜：騰訊視頻雲直播爲用戶提供TRTC (Tencent Real-Time Communication) + WebRTC快直播 (上行走RTMP推流或FLV、HLS、RTMP回源，下行支持標準WebRTC協議輸出）+ CDN (FLV/HLS/DASH) 大融合解決方案，像教育、會議、互動對實時性要求比較高的場景優先走TRTC接入(全球<300ms延時），同時TRTC接入會實時混流並RTMP推流到直播平臺，用戶能夠根據在線併發量配置超過必定併發閾值(好比100W）之後自動切一部分流量到WebRTC快直播(延時500ms左右）或普通CDN接入(延時跟用戶GOP及CDN buffer配置有關，廣泛延時在2-5秒左右)。視頻雲CDN在全球50多個國家和地區建設超過1300個傳輸節點，總帶寬儲備超100T，與超過50家全球運營商合做，海外加速點200+。

LiveVideoStack:我知道有些客戶已經在測試騰訊視頻雲的SRT方案和WebRTC CDN產品，相較於QUIC、RTMP和低延遲HLS，SRT和WebRTC CDN的優點是什麼？

李鬱韜：SRT相比QUIC，有專門針對直播場景的優化，傳輸控制中更好的結合了實時碼率的評估和pacing rate發送間隔的計算；另外，SRT在傳輸時是可配置的容許丟包的，騰訊視頻雲根據音視頻的編碼特色，支持有選擇的丟包，在下降幀率但不影響畫面質量的狀況下，儘量的保障了播放的流暢性。SRT基於UDP比基於TCP的RTMP和HLS，有效解決了在長距離鏈路傳輸場景中延遲高、抗抖動性差的問題；通過實際測試，SRT相比RTMP具備明顯的低延遲和低卡頓的特性咱們在 SRT的擴展性上，支持全部基於TCP的協議，包括RTMP/FLV/HLS，QUIC主要用於在FLV、HLS。

LiveVideoStack：關於視頻Codec有哪些新消息能夠透露的？

李鬱韜：2019年9月，騰訊正式宣佈加入開放媒體聯盟AOMedia，推動視頻AV1標準商業化，併成爲董事會員之一，同時也是董事會員中惟一的中國企業。日前，騰訊視頻雲直播（FLV/HLS/DASH)、點播均已支持AV1/AVS2標準，據悉，騰訊雲也是國內首家直播+點播同時支持AV1/AVS2視頻處理業務的公有云廠商。VVC/AVS3騰訊視頻雲也正在開發和工程驗證階段，2020年也會陸續對客戶開放。

LiveVideoStack：關於深度學習，從AI加強的Codec，內容理解和自動化剪輯，騰訊視頻雲正在作哪些相關工做？

李鬱韜：騰訊視頻雲明眸·極速高清-智能動態編碼技術，經過智能場景識別，業界領先的音視頻編碼、圖像深度學習與畫質加強等技術積累，對視頻進行動態感知編碼和畫質加強處理，提高視頻觀看體驗，爲直播、點播等行業以更低的碼率提供更高清的流媒體服務。極速高清能夠在點播和直播業務下，相比開源軟件在相同畫質下平均分別節省超30%+和40%+的帶寬成本；或在同等帶寬條件下，提供更加高清優質的視頻畫質體驗，感覺「質」的變化。極速高清AI加強這塊在4K超分、HDR、色彩加強、智能彈幕、插幀等這幾方面技術在遊戲賽事直播、廣電高清頻道以及4K/8K體育賽事直播上如今都有比較成功的客戶應用。

騰訊視頻去智眸·採識編審基於騰訊各實驗室最新研究成果，爲廣電新媒體、教育、直播及在線視頻場景提供視頻內容理解剪輯、智能識別、智能編輯、智能審覈等功能，70週年CCTV國慶閱兵自動剪輯，遊戲直播賽事精彩片斷實時自動生成，直播實時語音/OCR識別、涉黃、涉暴、涉政實時審覈等。結合智眸·採識編審的視頻內容理解和剪輯、編輯、識別、審覈等原子能力，騰訊視頻雲最近推出的騰訊雲剪和導播臺產品在此次新冠疫情階段在教育、會議和體育賽事直播上爲媒體平臺、PGC/UPGC、MCN、直播平臺以及電競內容等內容製做者和機構提供在線視頻創做工具、編輯、推流等一整套pipeline流程解決方案。

音視頻下一個風口：線下到線上的全面轉型？

LiveVideoStack:從直播、短視頻、直播答題、在線教育、視頻會議、企業協做，多媒體應用經歷了從互聯網到行業，從2C到2B的滲透，你認爲下一個風口在哪裏？

李鬱韜：短時間來看，就如前面我提到的，受此次疫情的推進，線下業務、線下內容、線下商業會加速往線上遷移，包括你們看到的辦公協同、音視頻通訊、視頻營銷、娛樂體驗等等；有個數據，近一個月期間，騰訊雲在音視頻通話的分鐘數達到了日均30億分鐘的規模，這個挺大量級的一個數字；另外，以前VR一直不溫不火，那若是線下商業往線上遷移，相似VR看房、VR看車等場景，真的是能夠落地了；另外基於音視頻AI的智能內容生產、虛擬主播、智能客服等場景也將會愈來愈多。

中長期看，比較看好在線辦公協同和在線教育的發展，通過這段時間在家復工復課，你們感覺到了科技對於緊急事件的巨大幫助，體驗到了愈來愈豐富和穩定的音視頻通訊服務能夠必定程度替代傳統的線下溝通方式，相信將來你們也更能接受這種在線教育和辦公的生活方式。