AR/VR 的夢想已經成爲過去

導讀	在CES 2017大展上，Kino-mo公司的展臺前面擠滿了人。到底是什麼這麼吸引人呢？原來這家公司利用全息裸眼方案 Kino-mo Holo Displays向觀衆展現了酷炫和驚豔的3D畫面，令觀衆大飽眼福。

 

這款AR產品主要由LED及旋轉葉片投影機組成，當較細的葉片旋轉後，會有一種透明消失的感受。以後再將視頻畫面展現在高速旋轉的葉片之上，形成投影在空氣中的假象，加上特殊處理的3D視頻，效果很逼真。

VR/AR CES展臺狀況

AR能產生各類驚豔的效果。言歸正傳，咱們來看看CES 2017 VR/AR 展臺的大體狀況。今年三大頭顯缺席CES，CES再也不是三大頭顯的天下了。隨着生態型企業的陸續進入，下降了VR/AR進入門檻，促成了愈來愈多的廠商攜本身的VR/AR 相關產品亮相CES。爲此，今年CES主辦方單獨爲VR/AR開設專區，可見，VR/AR已經成爲一股不可忽視的新生力量。

具體地，微軟在將來的幾個月內還將和戴爾、宏碁、惠普、聯想和3Glasses合做一塊兒推更加低廉的類HoloLens的AR一體機。英特爾也宣佈，Project Alloy將於2017年第四季度正式發貨。 Alloy將採用英特爾最新第7代CPU和RealSense，前部搭載魚眼鏡頭以及傳感器。這兩家在智能手機時代失勢的巨頭都但願可以抓住移動VR/AR這一波趨勢。

毋庸置疑，本次CES微軟的VR/AR陣營、英特爾的Project Alloy和谷歌Daydream、Tango陣營成爲新焦點。能夠看出，谷歌Daydream家族愈來愈龐大，支持Daydream平臺的手機除了谷歌自家的Pixel和Pixel XL，還有Moto Z、ZDroid以及Axon 7，將來三星、LG、HTC、小米、阿爾卡特等手機廠商也將加入谷歌Daydream陣營。

有個很是意思的事情，按照常人的邏輯，高通、英特爾、Nvidia 本應是井水不犯河水，他們之間本沒有太多正面的競爭，但那是PC、移動互聯網時代的行業劃分，已通過時了。從此次CES 來看，三者的交集愈來愈多，人工智能、VR/AR、物聯網和無人駕駛等領域將成爲下一個火藥味十足的戰場。因此阿里集團必須在這些方面有所爲，不然很是被動，只能淪爲看客。

AR的挑戰

VR 成爲潮流所趨，AR 會更加鼎盛。AR的表現形態更貼合線上線下購物的訴求。咱們着重分析一下AR目前所面臨的挑戰。概括起來有五點，分別是移動性、爆款設備、續航能力、app生態系統和電信公司跨行業補貼。

從本次CES上咱們能夠看出AR移動化趨勢十分明顯。要想隨時隨地傳輸具備沉浸感的優質的內容，須要有高速的移動網絡支持。愈來愈多的AR設備支持移動鏈接。英特爾、高通和華爲都在5G網絡上頻頻發力。英特爾推出了業界首款同時支持6GHz如下頻段和毫米波頻段的5G調制解調器。憑藉這款調制解調器，英特爾在高通最擅長的領域先下一局，讓人另眼相看。

因爲AR涉及到複雜的圖像識別跟蹤和3D渲染，對CPU和GPU的計算能力和功能都提出了更高的要求。NVIDIA分別推出了Drive PX、 Drive PX 2這兩個計算平臺，其中Co-Pilot包括面部識別、頭部追蹤、視線追蹤以及讀脣技術，GeForce與Facebook Live平臺合做，遊戲、AR/VR、數據中心和自動駕駛是NVIDIA的四大業務，而計算能力在這幾個領域中都將發揮重要做用。至於電池續航能力，高通、Intel和Nvidia等公司已經意識到這方面的問題，正在大力研究處理器的智能化電池管理。例如驍龍835已經不只僅是一款手機處理器，高通宣稱這款處理器徹底適合無人駕駛、VR/AR等更復雜的領域。

其實硬件並非阻礙將來幾年制約AR普及的主要障礙，相反，有吸引力的內容的缺少、AR應用用戶體驗問題以及開發成本高是咱們須要解決的緊迫問題。Vuforia等AR SDK 提供商爲了普及AR應用，打造了內容製做及分發平臺，提供模型、動畫和配音音效的製做工具，知足用戶多樣化的需求。Fyusion 創建了專爲移動設備打造的 AR 內容製做平臺。經過計算機視覺和機器學習技術，創造了一個基於手機端的平臺，用於建立 AR 內容。CapturingReality公司開發了一整套捕捉和還原3D模型的技術，提供編輯器，供美術使用。

AR設備是眼鏡仍是手機？

眼鏡方面，科叔宣佈Intel Project Alloy將開放給開發者，並計劃與頂級 OEM 合做，而且將在2017年Q4推出 Project Alloy 的消費版產品，第三方廠商均可以推出基於這套方案的產品。許多國內外廠商推出了AR 眼鏡，從分辨率、FOV和計算性能等方面作比較，仍是微軟的Hololens AR 設備表現最好。但就是Hololens AR 眼鏡也纔剛剛及格，還有很長的路要走。

從長時間續航能力、app生態系統、移動性和電信補貼來看，眼鏡設備都不佔優點，相反手機已具有上述特徵。ASUS在CES上發佈Zenfone AR Tango 手機，預載的 Android 7.0 Nougat系統支持 Daydream VR 功能，用戶用一部手機玩盡 Google 的AR 和VR兩大功能。用戶只需將 Zenfone VR 放入 Google的Daydream VR 裝置就可使用 Daydream Apps，而開放 Tango 模式就能使用 Tango Apps。不久，華爲表示會繼聯想和華碩後加入 Tango 圈子。BMW 也宣佈進一步將 Tango 技術運用到營銷體驗上，銷售人員透過應用程序就可讓客戶看到 BMWi3 系列的內裝及其細節。

雖然AR 眼鏡和AR手機相繼問世，可是市場上仍是缺少像在移動互聯網拉開時候iphone那樣的標誌性設備。

AR/VR團隊的切入點和抓手

在2017年移動平臺總結和規劃會上南天提醒咱們要看外部形勢，結合外部形勢，以及咱們業務和技術的特色來思考團隊的目標和抓手。前面咱們分析了AR/VR現狀和將來發展趨勢，那麼阿里在這個形勢下須要作哪些儲備呢？毋庸置疑，圖像識別、三維感知與跟蹤、人機交互和三維渲染是AR／VR 四個核心部分，從這些方面下功夫，在實戰中作好技術積累，更好地實現新零售下的內容升級，爲下一代的計算平臺打基礎。

1. 圖像識別、三維感知與跟蹤：AR目前主要仍是利用天然特徵識別。隨着大數據的迅猛發展，深度學習技術愈來愈被衆多公司採納。Aipoly 是從視頻中獲取物體信息轉換成語音說明的一款app，得到了CES2017 Innovation Awards，從中能夠看到組委會對圖像識別技術的指望。它利用了深度學習技術來訓練識別模型，與拍立淘的區別是從視頻中連續識別物體，並能轉換成語音表達。
2. 人機交互：在人機交互中我更傾向於使用天然交互。我比較了語音識別、手勢識別、頭部和眼球跟蹤等幾種通用的天然交互方式，發現語音的輸入是咱們與設備交互最簡單、最有效、最溫馨的方式。在這裏建議阿里更深刻研究地購物場景的語音識別，培養用戶使用語音的心智。同時，把語音識別模塊移植到智能設備和手機應用中，支持集團內外的商業使用，造成相似Amazon Alex那樣的生態鏈。
3. 自動建模：3D 商品模型數量當然重要，可是具備3D自動建模能力和內容製做的體系化纔是更重要的。結合商品、場景和人物重建的不一樣特色，實現2D轉3D和三維重建技術的突破，造成適合商業化運做的產品體系，提供商家制做3D手段，加速商品內容升級。
4. 共建和協力：你們都看到力AR的做用和價值，集團不少BU都成立了AR實驗室，百度也成立了AR Lab。而GM Lab 從事VR/AR研發已經好久，併成功實現了buy+ 和AR 捉貓貓等多種案例，這個時候與各個部門的AR 實驗室共建，把咱們的平臺和經驗分享出去，促成集團使用統一的接口和建模標準，推進集團相關技術和標準的對外輸出。

主流的深度學習框架有Tensorflow、Caffe、Convnet和CNTK等，咱們比較了這幾種深度學習框架，肯定以Tensorflow 爲基礎訓練，發展可運行在移動端的深度學習模型。不過，深度學習不多是一招鮮，吃遍天，須要把天然特徵識別與深度學習有機結合起來使用。

集團不少BU在深度學習有深刻地研究，淘寶經過各類營銷和商品推廣的實際項目推進和實現了在AR級別上的即時定位與地圖重建的算法產品化，若是這兩方面很好地結合，進一步提高識別的準確性和跟蹤的穩定性，在AR底層的圖像識別、三維感知與跟蹤技術上造成阿里的核心競爭力。

原文來自：https://yq.aliyun.com/articles/69404?spm=5176.100239.bloglist.54.MILcpm

本文地址： http://www.linuxprobe.com/dream-arvr.html