比 Animoji 更高級?普渡大學開發出 3D 視頻聊天系統
3D 加強版的微信視頻通話或 FaceTime,你期待嗎?
記得 iPhone X 的 Animoji 功能嗎?使用這個功能,使用者在攝像頭面前做表情,iPhone X 內包括小豬、小狗在內的 emoji 表情也可以實時做出類似的表情。之後,使用者可以將動畫表情保存在手機上或發送給朋友。
由於目前只有 iPhone X 在使用 3D 結構光技術,通過前置的攝像頭快速掃描人臉並進行建模,所以 Animoji 雖然好玩,但要玩到首先得有一台 iPhone X。
不過也不必太羨慕能玩 Animoji 的人,現在,普渡大學的研究人員開發出一種新的技術,不需要 iPhone X 就能享受比 Animoji 更高級的功能。該校研究人員近日推出一個名為「Holostream」的系統,能夠讓使用者在移動設備上實現高質量的 3D 視頻通話。該系統對網速要求不高,現有的網路環境基本都能使用。
和 Animoji 相比,「Holostream」最亮眼的地方在於除了可對真人進行實時建模,還支持實時視頻通話。在通話中,雙方看到的會是一個對方的 3D 真人形象,並支持雙方實時交互。比如,如果你用這個系統和別人視頻,就可以自主地旋轉對方的臉部,看他的側臉或者頭髮等。這是之前微信視頻通話、FaceTime 等做不到的。
雖然目前在技術層面上人臉 3D 建模已經不再困難,但要想在手機、平板電腦等移動設備視頻通話中實現 3D 效果,並不簡單。因為 3D 視頻通話需要考慮如何實時傳輸 3D 畫面,保證畫面的清晰度等諸多問題。
「Holostream」系統同樣考慮到這些問題,並由此開發出四個重要的模塊:首先,系統內有一個高精度和高解析度的 3D 視頻採集模塊,採集到的畫面可以實現 30Hz 的顯示屏刷新率(基本能滿足畫面的流暢度); 其次,系統內壓縮 3D 視頻數據大小的壓縮模塊,可以將龐大的 3D 建模數據壓縮至適合移動設備傳輸大小;另外,系統內安裝有 3D 視頻流模塊,可以傳送壓縮後的 3D 視頻內容,並支持實時解壓視頻;最後,當視頻傳至另一端時,系統內還有一個 3D 視頻可視化模塊,可以讓用戶實時看到高質量 3D 視頻內容,並能與內容進行交互。
按照普渡大學研究人員的設想,「Holostream」可以方便地用於各種應用程序。比如,基於這個系統,可以開發出一套全新的視頻通信應用。更為關鍵地,未來該系統甚至還能被用於遊戲、遠程醫療或遠程協作設計等多個行業。
責任編輯:雙筒獵槍
圖片來源:普渡大學
本文由極客公園原創
轉載聯繫 zhuanzai@geekpark.net


TAG:極客公園 |