下一代社交平臺？三維重建萬物

SIGGRAPH 2020

Consistent Video Depth Estimation

想象一下：

輕鬆的下午茶時間，你正專心製做咖啡，忽然潮水涌上地面，把你淹沒。 而你渾然不知……

https://arxiv.org/pdf/2004.15021.pdf

藉助於三維重建技術，咱們得到了現實環境的空間信息，從而在虛擬空間上能夠把潮水精確地與現實疊加。

 ？ 三維重建

3D Reconstruction

三維重建是：對三維物體創建適合計算機表示和處理的數學模型，是在計算機環境下對其進行處理、操做和分析其性質的基礎，也是在計算機中創建表達客觀世界的虛擬現實的關鍵技術。

如何進行三維重建？

無界社區成員王錚，爲咱們描述了基於深度學習的三維重建方法：

首先 ， 每個二維圖像都有事先採集好的三維模型；

其次 ，利用數學中的投影方法，將二維圖像中的物體局部與三維模型中的物體局部進行匹配，而匹配的目的是讓算法知道二維圖像的結構特徵在三維的空間中長什麼樣子；

最後 ，經過對各類物體的匹配方式的學習，算法知道了如何將二維結構變成相對應的三維形狀。

能夠把以上過程想象成捏橡皮泥，算法學習完後，給計算機 「看」 一張圖，計算機就「捏出」一個三維模型。

a ：用戶畫一個正面圖

b ：模型輸出一個三維形狀

c ：用戶利用三維形狀的側面畫一個側視圖

d、e ：模型輸出更新後的三維形狀

這是從圖像恢復到三維模型的一個例子

圖自teamlab官網

再好比，這是在Teamlab island活動上，一位小朋友在紙上畫畫，他畫完一條魚，走到投影屏幕旁邊，畫好的魚就 「跳進」 海里了。這對正處於對世界充滿好奇的青少年孩子來講，極具吸引力！詳見專訪：如何讓你畫裏的魚，遊進海里？

還有哪些能夠被三維重建？

- 室內場景

Indoor Scene Modeling by Single Image Understanding

在給定一幅RGB圖像的狀況下，經過推理室內環境上下文，同時恢復語義內容、三維幾何和對象關係。

https://arxiv.org/pdf/2002.09790.pdf

- 服裝重建

Detailed Garment Recovery from a Single-View Image

從照片中提取服裝信息，而後在 3D 空間中重現服裝。以下圖，從 a 圖在三維空間重建爲 b 圖，而後再把服裝穿在其餘 3D 模特身上。

- 人體重建

此項技術由pinscreen avatar SDK提供支持，咱們每一個人均可以生成本身的三維模型，從而在虛擬世界獲得映射。

https://www.pinscreen.com

MIXLAB無界社區成員

劉皓旭專訪

Seven.AI

以3D視覺爲技術核心的AI公司，致力於打造下一代的信息承載和展示方式。

—— 劉皓旭 SevenAi 創始人

第一階段的DEMO

「  咱們即將推出的這款產品呢， 形態上能夠暫定認爲是3D內容分享平臺 。 不一樣於現有的內容平臺基於文字、圖片或者視頻，咱們這款產品 更加註重的是用戶與信息或者說是與物體和場景的交互 。

也不一樣於虛擬場景和物體，咱們重建出來的是整個現實世界，將整個3D現實世界放在用戶的眼前，可以給予用戶更真實的觀感和體驗。

依託於咱們的技術優點，能夠快速實現完成高質量模型的建立，用戶對模型的創做能夠像製做視頻同樣的簡單。 產品還在研發中，不方便過多的透露更多的細節，感興趣的能夠持續關注。 」

訂閱號：SevenAi_ 

網頁：http://www.sevenai.cn/

- 全文結束 -

【本週日 · 線上活動】

Mixlab閃聊 🚀

【主題】 LOWCODE

【時間】9.13日 20:00 

【人數】 30人

【閃聊發起人】 張然

今年DeeCamp項目總冠軍參與者之一。

現奧地利IST Austria 圖形學和智能設計（博士）。

【參與方式】 騰訊會議：167466048

掃碼加微信，領取會議密碼

💡 你們能夠帶着問題來聊，

也能夠分享本身的相關觀點或者經歷，

但願你們能就一些觀點，有收穫，有火花~

歡迎一塊兒來探索未知世界

更多資料請查閱：Mix+人工智能專刊

520+已加入👇

每期由mixlab社區精選、收錄人工智能的相關內容。 包括AI產品、AI技術、AI場景、AI投資事件、AI的思惟方式等。MIX的主題包括：AR、VR、計算設計、計算廣告、智能設計、智能寫做、虛擬偶像等。

付費加入星球后，便可免費加入科技前沿外刊羣： 《新科學家雜誌》、《英國金融時報》、《華爾街日報》、《經濟學人》、《紐約時報》、《泰晤士報》等當日最新外刊。

轉發求支持！

本文分享自微信公衆號 - 無界社區mixlab（mix-lab）。
若有侵權，請聯繫 support@oschina.cn 刪除。
本文參與「OSC源創計劃」，歡迎正在閱讀的你也加入，一塊兒分享。