HTC Vive 首開「寫輪眼」 ，混合現實將成主流？

「他最後一個出場，氣場碾壓那些面無表情的瘦瘦男模們。」3月底，黑匣一位已經上了王者的女編輯這樣評論汪叢青。

2018上海時裝周開場秀，HTC Vive中國區總裁汪叢青也走了趟T台，臉上還掛著個VIVE Focus。那時，他也許憑藉身高體重三圍等優勢迷惑了眾女生，但僅僅一張現場照片就暴露了他的驚天大秘密——他沒摔倒！

戴著VR眼鏡走秀，難度顯然比「恨天高」高一個檔次，他怎麼做到不摔倒的呢？顯然，當時他肯定使用VIVE Focus一體機的攝像頭看路。HTC Vive都發布兩年了，我們從沒聽說那個攝像頭派上用場，而今天，它的「寫輪眼」終於解除了封印。

前置攝像頭SDK：超酷的混合現實體驗

4月17日，HTC Vive正式發布針對Vive Pro前置攝像頭和Vive音頻的VIVE SDK。藉助Vive提供的SDK，開發者將能夠實現許多基於Vive Pro前置攝像頭以及Vive音頻的MR（混合現實）體驗。

啥是混合現實？即在通過攝像頭實時看到現實世界的同時，還能看到疊加於現實世界的虛擬影像。不僅如此，立體RGB感測器還能支持3D感知和深度感應，讓開發者能夠創造虛擬與現實互動的神奇體驗。

原來Vive的開發者只能使用很簡單的相機功能，現在除了更新的OpenVR相機API之外，VIVE軟體團隊還為開發人員提供了VIVE SRWorks SDK。使用此SDK，你可以獲得的將不僅僅是原始相機圖像，還包括：

·深度判斷

·空間映射（靜態和動態網格）

·將虛擬對象放置在前景或背景中

·與虛擬對象進行實時交互以及簡單的手勢交互

這些功能由三個服務模塊提供：一個深度模塊，一個透視模塊和一個3D重建模塊。啥都有了，開發人員可以專註於內容而不是技術難題。據黑匣了解，該SDK還包括Unity和Unreal插件本地開發的支持文檔。

請看下黑匣辛苦整理的視頻和GIF：

GIF

深度判斷非常準確，以致於虛擬物品能識別每一樣傢具的大小及位置。每一幀信息量都很大。

GIF

空間映射。實時將現實環境里的物體進行拓撲，同樣基於深度感知功能。瞬間感受到CPU跟GPU的壓力。

用一個傳送門的測試應用來看一下該SDK的綜合表現：

有了這些功能後，VIVE Pro可以做什麼呢？

首先是全景的濾鏡，比如銳化效果、色調調整等。（圖太小，可能看不出牆壁上圖案的變化細節）

GIF

再看一個小遊戲，在辦公室里跟一隻笑得很賤的魚捉迷藏：

除此之外，HTC Vive還跟開發商Project Ghost Studios合作推出了一個遊戲，進一步發揮了對傳送門的想像力：

VIVE音頻SDK：三種模式自由切換

HTC Vive還宣布推出兩款VIVE音頻SDK（VIVE 3D Sound Perception SDK），可用於Unity，並即將支持UE4。

- VIVE 3DSP SDK

VIVE 3DSP SDK提供了Unity兼容的音頻空間化插件，具有以下功能：

高階高保真度立體聲系統。

基於精鍊真實世界建模（水平和垂直）的HRTF。

支持高解析度音頻源文件和播放。

與真實世界建模的聲學距離效應。

VIVE 3DSP插件支持房間效果，房間混響和反射，以及針對VIVE Pro進行調諧的聲音遮擋，同時支持Vive頭顯和其他品牌頭顯及耳機。

- VIVE專業音頻模式

由於VIVE Pro具有支持警報和對話模式的雙麥克風，HTC Vive特意提供了API以便開發者可以在監聽前景、背景音頻和兩者混合的三種音頻模式之間進行切換。此外，你還能使用USB Type-C高功率模式設置（開/關）。

什麼是混合現實？

VR、AR及MR的解釋有多種版本，黑匣傾向於從產品的作用來區分：

- VR（虛擬現實）意在虛擬一個現實世界出來，讓你沉浸其中，不知自己是莊周還是碟，不知今夕是何年。因此VR隔絕現實場景，只讓你看到虛擬影像，如不帶前置攝像頭的VR眼鏡；

- AR（增強現實）意在增強現實場景的顯示效果，讓你正常生活、工作時，還能獲得眼鏡提供的幫助信息。因此AR首先讓你看到現實場景，之後疊加有價值的信息，如透明的Google Glass；

- MR（混合現實）意在將現實和虛擬世界混合在一起，不只是將虛擬影像隨意疊加在現實場景上，而要能夠識別現實場景並與之互動。因此MR既要能識別場景的物體形狀大小，還要知道各自的遠近，如開了寫輪眼的HTC Vive Pro。

HTC Vive早就在Vive頭顯上增加了前置攝像頭，汪叢青在不久前也已經透露AR功能即將在VR設備上實現。如今，基於該攝像頭的多功能SDK終於面世了。那接下來，就看開發者們給我們什麼驚喜了。

黑匣這張配圖選得非常好

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！