計(jì)算機(jī)有視覺而人沒有,我們?yōu)槭裁床辉噲D讓前者幫助后者呢?或許這就CARA背后的主旨,CARA 是加州理工學(xué)院開發(fā)的一款新的 HoloLens 應(yīng)用順序。
該軟件借助 HoloLens 的深度感知能力,使用計(jì)算機(jī)視覺算法掃描環(huán)境并識(shí)別物體。接著,該應(yīng)用順序向視力受損的用戶告知物體的存在,使用空間音頻讓用戶確定物體在他們空間中的相對(duì)位置。
加州理工學(xué)院(Caltech)生物科學(xué)傳授、神經(jīng)生物學(xué)履行官馬庫斯 · 梅斯特(Markus Meister)博士和本杰明 · f · 比亞吉尼(Benjamin f. Biaggini)博士在一份聲明中表達(dá):“想象一下,在那個(gè)世界里你周圍所有的物體都有聲音,都能和你說話。無論你注視著什么,你注目的不同物體都會(huì)被激活,并對(duì)你說出它們的名字。你能想象在如此一個(gè)世界里到處走動(dòng),完成一些我們通常使用視覺系統(tǒng)完成的任務(wù)嗎?這就是我們?cè)谶@個(gè)地方所做的——為物體賦予聲音!
Cara 是由研究生 Yang Liu 領(lǐng)導(dǎo)的科學(xué)家團(tuán)隊(duì)在 Meister 的實(shí)驗(yàn)室開發(fā)的,可以提供了幾種模式來幫助使用者。當(dāng) HoloLens 掃描環(huán)境時(shí),系統(tǒng)的聚光模式可以依據(jù)用戶的視線來識(shí)別物體,而Scan模式則可以從左到右來識(shí)別物體。
研究小組通過設(shè)計(jì)一條通往加州理工學(xué)院貝克曼行爲(wèi)生物學(xué)大樓的路線來測(cè)試那個(gè)應(yīng)用順序。在使用Cara 系統(tǒng)時(shí),每個(gè)測(cè)試對(duì)象都成功地依據(jù)HoloLens的導(dǎo)航走出迷宮。 另外,研究小組還設(shè)計(jì)了一個(gè)虛擬現(xiàn)實(shí)環(huán)境,作為其他研究人員評(píng)估自己輔助設(shè)備的考試。
該應(yīng)用順序仍在開發(fā)中,目前的工作包括改進(jìn)和加強(qiáng)計(jì)算機(jī)視覺算法。那個(gè)團(tuán)隊(duì)心想在銀行、酒店和商店等場(chǎng)所部署軟件來幫助客戶瀏覽他們的環(huán)境。Meister 、 Liu以及合著者、南加州大學(xué)的博士后學(xué)者 Noelle Stiles,在一篇名爲(wèi)《AR爲(wèi)盲人提供認(rèn)知幫助的能力》的研究論文中詳細(xì)說明白該研究小組的發(fā)現(xiàn)。
去年,游戲開發(fā)者 Javier Davalos 用 HoloLens 創(chuàng)造了一個(gè)類似的概念驗(yàn)證。他的版本也使用環(huán)境掃描識(shí)別外表和空間音頻給用戶提示他們的相對(duì)位置,但不是以口述識(shí)別的對(duì)象的形式:演示應(yīng)用順序會(huì)在用戶靠近障礙物的時(shí)候增強(qiáng)音量,并發(fā)出警報(bào)。
我們?cè)诰很欣喜的看到,越來越多的從事增強(qiáng)現(xiàn)實(shí)和視覺輔助工具應(yīng)用的公司在用各種技術(shù)來幫助殘疾人。譬如,另外VR網(wǎng)曾報(bào)道過的紐約大學(xué)的學(xué)生團(tuán)隊(duì)開發(fā)了一個(gè)可以實(shí)時(shí)翻譯手語的應(yīng)用順序,甚至 Magic Leap 也獲得了類似的專利技術(shù)。與此同時(shí),Starks 的AR耳機(jī)也可以通過頭戴式顯示器爲(wèi)聽力受損的人提供字幕。經(jīng)常有人把增強(qiáng)現(xiàn)實(shí)描述爲(wèi)給一般人“超能力”,如果你了解自己的超級(jí)英雄傳說,這也許是件好事,當(dāng)然也也許是件壞事。但是現(xiàn)在,爲(wèi)了給那些沒有擁有能力的人提供虛擬視覺的禮物,至少我們?cè)诰在用這些能力做好事。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容圖片侵權(quán)或者其他問題,請(qǐng)聯(lián)系本站作侵刪。 侵權(quán)投訴