當前位置:
首頁 > 科技 > 蘋果發布ARKit 3及全新開發工具,帶來遮擋、動捕等新突破

蘋果發布ARKit 3及全新開發工具,帶來遮擋、動捕等新突破

查看引用和消息源請點擊:映維網

ARKit 3可以帶來更具沉浸感的AR體驗

映維網 2019年06月04日)在今天凌晨舉行的WWDC開發者大會中,蘋果正式亮相了用於為iOS開發AR應用程序的最新工具:ARKit 3。

ARKit 3新增了對場景人物的實時身體追蹤和遮擋功能,AR對象現在能夠令人信服地出現在人物的前面或後面。為了幫助開發者更輕鬆開發AR應用程序,蘋果同時推出了Reality Composer和RealityKit。

1. ARKit 3

ARKit從一開始就提供了計算機視覺追蹤功能,並允許現代iOS設備判斷自己在空間中的位置,以及檢測諸如台桌等用於疊加虛擬對象的平面。對於ARkit 3,系統現在已經支持動捕和遮擋功能。藉助『動捕』,開發者可以將人類動作集成到應用程序,而通過『遮擋』,AR內容能夠自然地出現人們前面或後面,從而實現更加身臨其境的AR體驗和有趣的綠幕應用。

動捕演示

ARKit 3可以藉助計算機視覺判斷人物在場景中的位置。系統可以根據其與攝像頭的相對距離來判斷虛擬對象應出現在人物的前方或後方,從而正確地將數字內容整合至包含真人的場景之中。對於ARKit的早期版本,無論與攝像頭的相對距離如何,虛擬對象總是出現在人物前方,而由此導致的深度線索衝突會打破增強現實的沉浸感。

ARKit 3目前支持實時身體追蹤。通過確定人物在場景中的位置及身體運動方式,ARKit 3可以追蹤相應身體的虛擬版本,而後者反過來可以用作AR應用程序的輸入。身體追蹤可以將人物動作轉換為虛擬角色的動畫,或用於與場景對象進行交互等等。

遮擋演示

根據蘋果的演示,當前的身體追蹤技術看起來相當粗糙。即使攝像頭只是輕微地移動,當身體的其他部位移動時,虛擬化身的雙腳都無法保持靜止,而且系統不能很好地追蹤小腿的運動。當用戶揮手時,即便用戶本身沒有前傾,虛擬化身都會響應於動作並身體前傾。在演示畫面中,用戶完全是將雙臂置於兩則,並且沒有在軀幹前面左右橫移。

人體遮擋和身體追蹤對於AR的未來十分重要,尤其是頭戴式設備將「始終開啟」,並且需要經常處理遮擋情況。對於大多數企業來說,這是一個活躍的研發領域,而蘋果現在有可能是為即將發布的AR頭顯進行提前的打磨精製。

在今天的WWDC主題演講中,蘋果還和微軟合作,通過AR版《我的世界》演示了ARkit 3的最新功能。對於微軟的演示,你可以利用iPhone給《Minecraft Earth》的場景添加一層增強現實功能。

《我的世界》演示

https://v.qq.com/x/page/f0879o899f7.html

ARKit 3同時可以令前置攝像頭最多追蹤三個面部,以及同時支持前後攝像頭。不僅如此,這個工具支持協作性會話,並允許用戶更快速地進入共享式AR體驗。

蘋果沒有詳細介紹ARKit 3.0 其他功能與優化:

同時支持前後攝像頭

更快的參考圖像載入

自動檢測圖像大小

視覺連貫性

更強大的3D對象檢測

AR Quick Look中的視頻錄製

AR Quick Look中的Apple Pay

多面容追蹤

協作會議

AR Quick Look中的音頻支持

檢測最多100張圖像

HDR環境紋理

AR Quick Look中的多模型支持

AR Coaching UI

2. RealityKit

RealityKit是從零為AR進行開發,旨在幫助開發者輕鬆為iOS開發AR應用程序。它可帶來逼真的渲染效果,令人難以置信的環境映射,以及噪點和運動模糊等相機效果的支持。RealityKit同時能夠實現出色的動畫,物理和空間音頻,開發者可以通過全新的RealityKit Swift API來利用RealityKit的功能。

要開發AR應用程序,你需要理解3D應用程序開發,工具和工作流程,而大多數iOS開發者都不太可能具有豐富的經驗,從而影響了他們擁抱這項新媒介的興趣。顯然,蘋果希望通過RealityKit來幫助開發者更輕鬆地走進AR領域。

根據蘋果的描述,RealityKit聽起來像是一款微型遊戲引擎。iOS開發者似乎無需學習諸如Unity或Unreal等遊戲引擎工具,因為RealityKit將能成為一個更為簡單的替代方案。

採用Switf API的RealityKit提供了開箱即用的聯網解決方案,可支持你為iOS開發共享式AR體驗。

開發工具演示

3. Reality Composer

Reality Composer是適用於iOS,iPadOS和Mac的強大新應用程序。即便先前沒有任何3D開發經驗,開發者都能夠輕鬆開發出AR體驗。藉助簡單的拖放界面,以及高質量的3D對象和動畫庫,你可以輕鬆放置,移動和旋轉AR對象,並整合出最終的AR體驗,然後在Xcode中直接集成至應用程序或導出到AR Quick Look。

除了內置的對象庫之外,Reality Composer同時允許你以USDZ格式導入3D文件,並且提供了空間音頻解決方案。

4. AR硬體

蘋果一直以來都在有條不絮地支持AR。儘管有關蘋果AR硬體的傳聞由來已久,但似乎蘋果不準備在今年發布備受期待的AR硬體。

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 映維VR 的精彩文章:

虛幻引擎為HoloLens 2推出搶先體驗版支持
沃爾沃投資,VR頭顯廠商Varjo完成數百萬歐元融資

TAG:映維VR |