蘋果手機能做面部表情捕捉了，現其已進入全身測試階段
幾個月前，網路上便出現了一個台灣藝術家所做的面部捕捉測試。目前, Kite&Lightning遊戲工作室的創始人 Cory Strassburger在Youtube上發布了一系列更為系統、全面的測試。
作者：xuan
iPhone X上市後，相信不少用戶已經在社交網路當中曬過一輪「獨家定製」的Animoji了。這款iPhone新產品的上市，引起了新一輪的購買狂潮，而其所推出的Animoji功能更是被很多人稱之為iPhone X最容易讓人玩上癮的功能。
不過在Animoji風靡全球的同時，有用戶對iPhone X前置攝像頭進行研究，並發現了新玩兒法。
對於動畫藝術家來說，蘋果iPhone X是一個超出所有人想像的一個強大工具。而這種強大要歸因於蘋果前置攝像頭的True Depth系統，以及蘋果的ARKit API。 ARKit是Apple官方提供開發者使用的一個API介面工具。
通過ARKit，開發者能直接利用現成的框架，更容易地在自己的app上開發AR增強現實類功能。API中包括52個不同的面部跟蹤運動組，這也讓動畫製作者能夠將手機變成一個特別的性能捕捉系統。
幾個月前，網路上便出現了一個台灣藝術家所做的面部捕捉測試。目前, Kite&Lightning遊戲工作室的創始人 Cory Strassburger在Youtube上發布了一系列更為系統、全面的測試。
Kite & Lightning是一家專註於互動視頻和遊戲內容領域的工作室，他們總部坐落於洛杉磯。去年，這家遊戲工作室發布了一款沉浸時迷你歌劇《Senza Peso》，其中也使用到了眼部追蹤技術。
他們也投資開發了一款全新的VR遊戲：Bebylon Battle Royale: A Gentleman』s Game（寶貝大逃殺：紳士遊戲）。
現在，該公司在iPhone X上的測試也讓用戶感受到了不一樣的體驗。 通過使用一部iPhone X，一個為手機設計的一個定製應用，一個自製的頭盔設備，以及一套Xsens MVN（ 慣性動作捕捉系統）性能捕捉套裝，Strassburger給大眾展示了iPhone X更深層級的玩法概念。
Strassburger在視頻中解釋說，他想看看iPhone X能否用於VR遊戲中便宜又快速的面部動作捕捉，這種功能正是那些瘋狂痴迷於遊戲，想要表現自己的孩子們目前最需要、最想操控的。
同時，他也想知道能否通過iPhone X的面部捕捉系統，快速、便捷地為遊戲中的人物加入個性化色彩。
Strassburger的第一個測試是一個粗糙的面部捕捉測試。他在Unity中導入《 Beblon Battle Royle》的一個遊戲角色，並將ARKit輸出的面部捕捉數據混入該角色中。
iPhone X面部表情捕捉測試
在第二次測試中，Strassburger增加了眼球追蹤、頭部運動等更加細節的部分，並將iPhone X上記錄的面部動畫數據導入Maya。
在看到Youtube上的一名評論者詢問如何從手機中提取面部數據後，Strassburger回應其實這個操作非常簡單。
Strassburger使用的是Unity。作為全球最流行的引擎之一，目前市面上的上大部分移動虛擬現實應用程序都是採用Unity進行開發的。
Unity目前已經與蘋果聯手合作，確保在蘋果硬體上實現Unity開發的最佳集成。
Strassburger從遊戲中導入了一個角色，然後用51channel的數據與之相連接，以確保他可以在捕捉的過程中看到這個角色。
然後，Strassburger開發了一款應用，將數據記錄到iPhone本地的文本文件中，之後，他從蘋果中複製了文件，通過他自己編寫的一個轉換器來運行它，並將文本文件解析為Maya.anim文檔。
把這些文檔導入Maya和遊戲角色中，用戶在手機上呈現的表情，便出現在遊戲角色上了。
iPhone X面部表情捕捉測試第2部分—Maya數據測試
在Strassburger最近的測試中,他結合使用Xsens緊身衣褲來獲取面部和全身捕獲:
iPhone X面部捕捉測試第3部分-全身測試
Strassburger演示成果的質量也讓人們看到了除動作捕捉之外其他功能實現的可能性。尤其是在增強現實領域內，這種應用可能會起到至關重要的作用。
例如,利用這種角色人物來進行實時視頻聊天似乎也成為一個在近期可能會實現的技術。
本文來自三文娛，創業家系授權發布，略經編輯修改，版權歸作者所有，內容僅代表作者獨立觀點。[ 下載創業家APP，讀懂中國最賺錢的7000種生意 ]
TAG:創業家 |