計算機有視覺而人沒有,我們?yōu)槭裁床辉噲D讓前者幫助后者呢?或許這就CARA背后的主旨,CARA 是加州理工學(xué)院開發(fā)的一款新的 HoloLens 應(yīng)用順序。
該軟件借助 HoloLens 的深度感知能力,使用計算機視覺算法掃描環(huán)境并識別物體。接著,該應(yīng)用順序向視力受損的用戶告知物體的存在,使用空間音頻讓用戶確定物體在他們空間中的相對位置。
加州理工學(xué)院(Caltech)生物科學(xué)傳授、神經(jīng)生物學(xué)履行官馬庫斯 · 梅斯特(Markus Meister)博士和本杰明 · f · 比亞吉尼(Benjamin f. Biaggini)博士在一份聲明中表達:“想象一下,在那個世界里你周圍所有的物體都有聲音,都能和你說話。無論你注視著什么,你注目的不同物體都會被激活,并對你說出它們的名字。你能想象在如此一個世界里到處走動,完成一些我們通常使用視覺系統(tǒng)完成的任務(wù)嗎?這就是我們在這個地方所做的——為物體賦予聲音!
Cara 是由研究生 Yang Liu 領(lǐng)導(dǎo)的科學(xué)家團隊在 Meister 的實驗室開發(fā)的,可以提供了幾種模式來幫助使用者。當(dāng) HoloLens 掃描環(huán)境時,系統(tǒng)的聚光模式可以依據(jù)用戶的視線來識別物體,而Scan模式則可以從左到右來識別物體。
研究小組通過設(shè)計一條通往加州理工學(xué)院貝克曼行爲(wèi)生物學(xué)大樓的路線來測試那個應(yīng)用順序。在使用Cara 系統(tǒng)時,每個測試對象都成功地依據(jù)HoloLens的導(dǎo)航走出迷宮。 另外,研究小組還設(shè)計了一個虛擬現(xiàn)實環(huán)境,作為其他研究人員評估自己輔助設(shè)備的考試。
該應(yīng)用順序仍在開發(fā)中,目前的工作包括改進和加強計算機視覺算法。那個團隊心想在銀行、酒店和商店等場所部署軟件來幫助客戶瀏覽他們的環(huán)境。Meister 、 Liu以及合著者、南加州大學(xué)的博士后學(xué)者 Noelle Stiles,在一篇名爲(wèi)《AR爲(wèi)盲人提供認知幫助的能力》的研究論文中詳細說明白該研究小組的發(fā)現(xiàn)。
去年,游戲開發(fā)者 Javier Davalos 用 HoloLens 創(chuàng)造了一個類似的概念驗證。他的版本也使用環(huán)境掃描識別外表和空間音頻給用戶提示他們的相對位置,但不是以口述識別的對象的形式:演示應(yīng)用順序會在用戶靠近障礙物的時候增強音量,并發(fā)出警報。
我們在線很欣喜的看到,越來越多的從事增強現(xiàn)實和視覺輔助工具應(yīng)用的公司在用各種技術(shù)來幫助殘疾人。譬如,另外VR網(wǎng)曾報道過的紐約大學(xué)的學(xué)生團隊開發(fā)了一個可以實時翻譯手語的應(yīng)用順序,甚至 Magic Leap 也獲得了類似的專利技術(shù)。與此同時,Starks 的AR耳機也可以通過頭戴式顯示器爲(wèi)聽力受損的人提供字幕。經(jīng)常有人把增強現(xiàn)實描述爲(wèi)給一般人“超能力”,如果你了解自己的超級英雄傳說,這也許是件好事,當(dāng)然也也許是件壞事。但是現(xiàn)在,爲(wèi)了給那些沒有擁有能力的人提供虛擬視覺的禮物,至少我們在線在用這些能力做好事。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容圖片侵權(quán)或者其他問題,請聯(lián)系本站作侵刪。 侵權(quán)投訴