當前位置:
首頁 > 科技 > HoloLens通過語音導航和環境識別,為視障者提供行動能力

HoloLens通過語音導航和環境識別,為視障者提供行動能力

不是傳遞實際的視覺數據,而是通過音頻提示和指令實時引導他們。

映維網 2018年05月30日)微軟HoloLens能夠快速感知周圍的環境,這令人印象深刻,但僅限於顯示電子郵件或遊戲角色,缺乏創造力。最新的研究表明,HoloLens在作為視覺障礙者的視覺假體方面效果非常好。不是傳遞實際的視覺數據,而是通過音頻提示和指令實時引導他們。

加州理工學院和南加州大學的研究人員認為,目前恢復視力根本不是一個現實的目標,而替換視覺感知部分並不一定需要從視覺方面入手。畢竟,如果能說出椅子的位置,你無需視覺支持就可以避開它,不是嗎?

HoloLens通過語音導航和環境識別,為視障者提供行動能力

搗鼓視覺數據並生成高階特徵地圖是HoloLens的核心功能之一,所以研究團隊決定令設備專註於這一點,並且為用戶重新創建環境。

他們圍繞聲音設計了一種系統,其中每個主要對象和功能都可以通過語音或聲效告訴用戶它們的位置。例如當用戶接近牆壁時,它們將發出嘶嘶聲。用戶可以掃描場景,然後對象將從左到右地宣布自己的位置。用戶可以選擇一個對象,並重複其語音或聲效,從而幫助用戶發現它的位置。

HoloLens通過語音導航和環境識別,為視障者提供行動能力

對於在朋友家尋找手杖或沙發這樣的靜態任務而言,設備的運行效果十分出色。但值得一提的是,系統同時支持運動模式。

團隊邀請了7名盲人進行測試。研究人員首先向他們進行簡短的介紹,但沒有提供培訓,然後要求他們完成各種任務。用戶能夠可靠地定位並指向提供音頻線索的對象,而且通常情況下能夠迅速在房間中找到椅子,同時可以輕鬆避免障礙物。

HoloLens通過語音導航和環境識別,為視障者提供行動能力

他們接下來的任務是按照頭顯說明從建築物的入口導航至二樓的房間。一個「虛擬嚮導」將在前方數英尺遠的位置反覆說出「跟我來(follow me)」,然後在樓梯,樓梯扶手等位置發出警告。

7名被試在首次嘗試就順利到達重點,而且用時比正常情況下短。研究人員在論文中指出,其中一名被試說道:「這太有趣了!我什麼時候才能買到呢?」

實際上,微軟在多年前就開始對這方面進行研究,但當時並不存在所需的硬體。HoloLens改變了這一點。儘管它明顯適合正常視力人員使用,但HoloLens的能力可以滿足這裡描述的視覺假體要求。

有趣的是,研究人員指出30年前就已經有人預測過這種類型的系統。富有遠見的C.C. Collins早在1985年寫道:「我堅信我們應該採取更複雜的方法,利用人工智慧的力量處理大量詳細的視覺信息,然後取代眼睛的缺失功能以及大腦所進行的大部分視覺預處理。」

這種系統的潛力十分巨大,但該項目目前僅僅只是原型。隨著HoloLens等系統變得更輕和更強大,它們將成為美觀時尚的日用物品。我們不難想像,視力障礙者在酒店或商場將能輕鬆找到自己的目標位置,甚至能夠安全地行走在大街上。

研究人員寫道:「到目前為止,我們預計讀者在提高認知假體方面已經有了自己的建議。現在有一個硬體/軟體平台可以快速實施這些想法,並用人類被試測試它們。我們希望這可以促進發展,增強人們對盲人和視力障礙人群的認識,並且利用增強的聽覺現實來傳達我們無法知覺的一切。」

喜歡這篇文章嗎?立刻分享出去讓更多人知道吧!

本站內容充實豐富,博大精深,小編精選每日熱門資訊,隨時更新,點擊「搶先收到最新資訊」瀏覽吧!


請您繼續閱讀更多來自 映維網VR 的精彩文章:

IM應用Facebook Messenger增加360度圖片支持
紐約大學學生開發AR應用,實時翻譯手語

TAG:映維網VR |