1

紐約大學學生開發AR應用 實時翻譯手語

雖然Magic Leap可能計劃在不久的將來為AR頭顯帶來手語翻譯，但紐約大學的學生們已經證明，今天的智能手機搭配一款原型應用就可以實現這樣的壯舉。

藉助計算機視覺和增強現實，ARSL應用程序能夠幫助用戶通過智能手機攝像頭捕捉手語，並將其實時翻譯成相應的母語。反過來，這款應用程序同樣可以將口語翻譯成手語。

這款原型是由紐約大學Tandon工程學院的計算機系學生Heng Li，Jacky Chen和Mingfei Huang聯合開發，而他們得到了Connected Futures Prototyping and Talent Development項目的支持。這是紐約市媒體實驗室和Verizon之間的合作產物，主要投資增強現實，虛擬現實和人工智慧等新興技術。

Verizon擴展現實解決方案平台Envrmnt的XR產品開發主管Christian Egeler在一份聲明中表示：「當優秀的學生與Envrmnt團隊的傑出導師結合時，魔法就誕生了。通過幫助他們參與至前沿項目並構建未來的技術，我們發現了下一代的人才。」

Connected Futures Prototyping and Talent Developmen計劃在今年資助十多個項目，這其中就包括手語翻譯應用。其他應用程序包括Impromptu和Dreamine：前者是一種多用戶AR體驗，可讓非專業音樂人是演奏音樂；後者則是可以把創意導入AR遊戲的粘土套裝。

紐約市媒體實驗室的主管Justin Hendrix表示 「紐約市媒體實驗室十分高興能有機會將Verizon與紐約市市各所大學的技術和創意人才連接起來。我們很開心可以繼續推進虛擬顯示和增強現實，以及人工智慧的原型設計，而這些主題仍然是紐約市媒體實驗室關注的重點領域。」

2

0glass的AR遠程工作指導系統：哈勃（Hubble）

以下主要介紹深圳增強現實技術有限公司（簡稱0glass）的遠程工作系統——哈勃（Hubble）的功能與特點。

先從哈勃（Hubble）名字的由來講起，哈勃（Hubble）是美國著名的天文學家，他的全名是愛德文·鮑威爾·哈勃（Edwin Powell Hubble，1889年11月20日—1953年9月28日），他是研究現代宇宙理論最著名的人物之一，同時也是河外天文學的奠基人和提供宇宙膨脹實例證據的第一人。他發現了大多數星系都存在紅移的現象，建立了哈勃定律，被認為是宇宙膨脹的有力證據。同時，他也是星系天文學的創始人和觀測宇宙學的開拓者，被稱為星系天文學之父。

早在1990年4月24日在美國肯尼迪航天中心由「發現者」號太空梭成功發射的哈勃空間望遠鏡也是以愛德溫·哈勃為名，它是天文史上最重要的儀器之一，同時也是在地球軌道上並且圍繞地球的太空空間望遠鏡，它成功捕捉到了距離地球達134億光年的GN-z11星系發出的微光。換句話說，人們現在觀測到的是它在宇宙大爆炸後4億年時的樣子。

0glass將自己的增強現實遠程工作指導系統命名為哈勃（Hubble），寓意著我們的遠程工作指導系統可以看清遠程工作作場景中的每個細節，就像哈勃望遠鏡那樣可以看到遙遠星系中所發生的每個細節。

首先先跟著小編來了解下它的特點。

1、泛在接入

軟硬體全終端

全終端支持：

硬體（0glass智能眼鏡，手機、平板、PC）

系統（Android 4及以上，iOS 10及以上，Windows 7及以上）

全網適配部署

網路部署全網適配：網路接入支持WIFI、4G；

網路部署支持區域網（如企業內網）和廣域網；

廣域網支持雲部署：私有雲或公有雲（如阿里雲、騰訊雲、網易雲等）。

2、技術先進

獨有語義標記

語義標記：基於0glass獨有的MOM協議實現工作場景、工作內容、工作指導的語義標記，基於語義標記優化遠程指導的網路傳輸、優化增強現實的註冊跟蹤。

那麼Hubble（哈勃）的功能有哪些呢？

1、雙向實時

雙向實時語音

語音傳輸雙向實時：支持現場工作人員和遠程專家之間語音雙向實時互動，特別適用於時效性要求高、交互頻繁的工作場景。

雙向視頻推送

專家端可實時推送任意視頻短片，為前端提供實時指導及判斷依據。

可為現場工作人員提供實時指導；

遠程實時控制

實時控制：可遠程控制截屏、錄屏

便捷實現遠程截屏、錄屏。

2、AR呈現豐富

富文本

富文本互動：專家端可實時推送圖片、文字、等消息疊加於前端所見畫面之上，豐富指導的多樣性，使實時指導可視化。

3D動畫

在工作場景中，以3D動畫的方式呈現遠程專家的工作指導內容。

電子白板

電子白板：後端支持各種手繪，並推送至前端，疊加於前端所顯示的內容之上。

3、指導多樣

第一人稱視角

第一人稱視角遠程指導：現場工作人員以第一人稱視角採集工作場景圖像和視頻，遠程專家基於工作人員的第一人稱視角進行工作指導，方便工作人員解決問題。

多專家指導

多專家模式：支持多位專家在不同地域同時對智能終端（前端）進行遠程協助。

一對一協助

一對一協助（點對點視頻協作） 前端在遇到問題時，可在第一時間向在線的遠程專家尋求一對一指導。

3

設計師構想Assemble AR應用 用AR組裝宜家傢具

iOS 11已經內建了增強現實（AR）組件，宜家也上線了一款全新的AR應用IKEA Place，能夠幫助你事先查看宜家傢具能否塞進現實空間。設計師Adam Pickard構想了一款概念AR應用Assemble AR，針對更加實用的傢具組裝場景提供AR解決方案。這款AR應用可以說是AR版的宜家傢具組裝說明書，一步一步指引你在現實中組裝IKEA家。

GIF

設計師在其個人博客上說儘管宜家傢具的組裝說明已經非常簡潔易懂了，不過人們仍然可能在實際組裝過程中摸不著頭腦。這款應用的設計非常簡潔，應用可以掃描IKEA傢具包裝的條形碼、二維碼和產品編號，然後通過AR組件在屏幕上以AR形式顯示組裝說明的3D版本，一步一步指引你如何組裝傢具。

當然目前應用仍然是設計師構想的概念方案，不知道宜家是否有興趣吸收此概念，提供更實用的AR應用。

4

當龍井茶遇上黑科技：傳統茶企AR賣茶增強消費者互動

26日，西湖龍井知名品牌「盧正浩」聯合阿里巴巴旗下大數據營銷平台阿里媽媽對外分享利用AR賣茶，增強品牌與消費者之間互動的營銷創意。

「盧正浩」方面表示每年都在嘗試很多新升級。「如何拉近和年輕消費者的距離，如何在春茶上新這個節點讓品牌和消費者互動起來，是我們今年春茶節的一大目標。」

對此，「盧正浩」和阿里媽媽深度共建合作，利用時下最火的AR，結合遊戲的形式與消費者進行互動，讓他們一起來「採茶」，在這個過程感受盧正浩春茶的生長環境與品牌調性。

在30秒的遊戲時間裡，消費者在AR茶園中尋找可以採摘的新芽，採摘達到50葉的數量，就可獲得獎勵。

具體來說，整個營銷方案在阿里媽媽旗下營銷產品「品牌專區」中實現，用大尺寸圖片和陀螺儀的輕交互方式，形成明顯的遠近視差效果，當消費者在手機淘寶搜索框輸入「盧正浩」的品牌詞後，隨著點擊跳轉，消費者就進入了AR增強現實的遊戲頁面，在攝像頭影像的基礎之上，增加了茶園氛圍渲染、茶葉的3D效果展示等內容，烘托採茶的氛圍，吸引用戶進行採茶小遊戲。

「回顧整個『盧正浩』的方案，我們將沒有情感的AR、手持設備陀螺儀操縱等技術，和離最新營銷玩法很遠的傳統採茶行業相結合，在賦予技術溫和營銷新面貌的同時，為用戶提供更有品牌調性的互動玩法。」阿里媽媽資深技術專家李牧現場為大家解析。

5

瓏璟光電發布40度視場角AR光波導量產方案

3月28日，國內領先的虛擬顯示光學模組公司瓏璟光電，正式對外發布了其最新的光波導AR（增強現實）模組，其視場角達到世界範圍內領先的40度，解析度為1920*1080，出瞳距離18毫米，透光率大於82%；同時保持了輕薄的特性，鏡片厚度僅1.5毫米，重量低於20克。

目前，中興、網易、霍尼韋爾等多家國內外上市公司，以及一些國內的軍工巨頭已經體驗過瓏璟光電的波導模組，其中多家已和瓏璟光電達成了合作關係，開發基於波導模組的AR眼鏡，廣泛用於工業、物流、軍事、警用等領域。

據了解，光學模組是AR眼鏡的核心元件，其重要程度，不外乎如今的觸摸屏之於手機。而光波導，能實現真正類似普通眼鏡片薄厚、輕量的AR顯示方案，同時保持較大的視場角和清晰飽和的圖像效果。

6

ARKit發布半年來成績不錯 超1300萬次下載

來自 Sensor Tower 的最新數據，蘋果增強現實平台 ARKit 推出至今已經 6 個多月時間，如今基於 ARKit 的應用程序全球下載量已超過 1300 萬次。

這份數據中僅統計主要基於 ARKit 開發的新應用，不包括後來添加 AR 模式或者只是作為部分新功能的 App。同樣來自 Sensor Tower 此前 10 月份報告中，基於 ARKit 開發的應用數量還很少，當時 ARKit 只有一個月，應用累計下載量超過 300 萬次。現在 App Store 擁有超過 2000 個基於 ARKit 的 App。

在 1300 萬下載量中，有 47％ 是 AR 遊戲貢獻的，幾乎佔了一半的分量。這並不奇怪，ARKit 應用暢銷榜中很多都是遊戲，而且工具類和娛樂類分別位居第二和第三，分別占 14% 和 12%。生活類的比例正在上升，從去年的 5% 增長至 11%。

AKRit 免費排行榜中的第一位是 PlaySide 工作室的遊戲 AR Dragon，最受歡迎的付費遊戲則是來自上海遊戲團隊 Directive Games 的 The Machines。付費榜和暢銷榜兩大榜單的第一位，都被一款名為 CamToPlan Pro 的相機產品所佔據。

CamToPlan Pro 適用於專業的室內設計師，以及專修施工人員用於測量距離，是一款方便精細的測量應用。

在增速方面，AR 應用的下載量呈穩步增長狀態，不過用戶還沒有真正湧入 AR 遊戲，1300 萬下載量比起一些爆款遊戲的下載量來說也不夠看，今年的熱門新游像《堡壘之夜》、《絕地求生》在上架 1-2 周就已經超過這個下載數，目前玩家們還是更偏向於傳統遊戲，AR 遊戲剛剛起步，玩法比較單一，遊戲性不足，無論是體驗上還是付費點上還需要更多完善。換言之，AR 遊戲還有很大的上升空間。

7

代碼顯示谷歌計劃將ARCore集成到Chrome OS

谷歌的增強現實開發平台ARCore是以軟體作為基礎。跟已成為歷史的Project Tango不同，ARCore不需要特殊的硬體和軟體來映射周圍環境的深度信息，和將數字對象疊加在真實世界的表面。因此，這個平台正在兼容越來越多的設備（開源項目ARCore for ALL甚至令ARCore運行在技術上「不支持」的設備上，比如說一加 3T）。現在，谷歌似乎正準備把ARCore帶到一個新平台：Chrome OS。

Chromium Gerrit是一家Google Chrome和Chrome OS的代碼評審網站。一項最新的提交明確提到了用以添加「ARCore支持」的refactor（代碼重構）。具體來說，這描述了通過WebXR API（用於VR和AR內容的Web框架）來創建ARCore設備的過程。XRSessionCreationOptions為隨後的XRSession對象提供會話描述，而後者則充當XR硬體組件（如方向感測器和相機）的中間人，提供查詢設備姿態，獲取環境信息和渲染圖像等功能。

正如你猜想的一樣，Chrome OS的支持可能不適用於筆記本電腦形態的Chromebook。與Snapchat的Lens技術，以及Facebook的Camera Effects和AR Studio工具不同，ARCore不追蹤面部特徵或模型頭部運動。它主要是通過運動追蹤，平面檢測和光線估計的組合來將虛擬物體錨定到垂直平面和水平平面。因此，ARCore很可能會用於平板電腦形態的Chrome OS設備，比如說本周發布的Acer Chromebook Tab 10，以及傳聞中的三星Nautilus可拆卸Chromebook。

實際上，在另一項提交中留下的評論添加了代碼名稱為「Atlas」的新Chrome OS設備，這暗示了ARCore對Chrome OS平板電腦的支持。

無論如何，Chrome OS中對增強現實平台的支持與即將增加的本地視頻錄製平台相互呼應，而這將再次模糊安卓和Chrome OS之間的界限。在最近，谷歌為基於瀏覽器的操作系統帶來了受安卓啟發的一系列功能，如觸控式啟動器，鎖屏通知，Google Assistant和分屏模式。

8

全球民宿預訂平台Airbnb欲通過VR/AR提升用戶體驗

Airbnb(愛彼迎)是一家連接旅遊人士和家有空房出租的房主的服務型網站，其定位的全球民宿預訂平台可以為用戶提供獨立公寓、經濟住宿、家庭度假屋等多樣的住宿信息。

而隨著虛擬現實和增強現實的發展，Airbnb也開始探索新的用戶體驗。不過Airbnb認為這些技術仍處於早期發展階段，因此其目前的工作重點是在實驗和原型設計上。

Airbnb表示其研究分為兩種應用情況，一個是旅行前的體驗。一個是旅行中的體驗。

而旅行前的體驗將過虛擬現實技術實現，利用360照片和3D掃描圖讓租戶在旅行前通過VR瀏覽房間細節。而旅行中的體驗則通過增強現實來實現AR導航，這將有助於旅行者在旅途中更容易地看懂各種指示標牌（房屋內各種設施上的標語與提示信息），它也可以添加當地的文化解說，讓你更了解所處的城市。

（END)

喜歡這篇文章嗎？立刻分享出去讓更多人知道吧！