?? 由 文心大模型 生成的文章摘要

最近發(fā)表的題為“增強(qiáng)現(xiàn)實(shí)為盲人提供認(rèn)知”的報(bào)告詳細(xì)介紹了三位加州理工學(xué)院科學(xué)家的工作,這些科學(xué)家正在深入探討使用AR作為一種幫助盲人通過計(jì)算機(jī)視覺算法導(dǎo)航新的和不熟悉的位置的方法。
該團(tuán)隊(duì)利用Microsoft HoloLens在現(xiàn)實(shí)世界的“場(chǎng)景”上創(chuàng)建數(shù)字網(wǎng)格。使用稱為認(rèn)知增強(qiáng)現(xiàn)實(shí)助手(CARA)的獨(dú)特軟件,他們能夠?qū)⑿畔⑥D(zhuǎn)換為音頻消息,為每個(gè)對(duì)象提供佩戴耳機(jī)時(shí)聽到的“聲音”。
通過CARA,HoloLens將檢測(cè)周圍環(huán)境中的物體,然后使用空間化聲音通過讓他們呼喚您來告知您物體是什么。如果對(duì)象位于左側(cè),則語(yǔ)音將來自AR頭顯的左側(cè),而右側(cè)的任何對(duì)象將從頭顯的右側(cè)向您發(fā)出聲音。聲音的音高會(huì)根據(jù)你與物體的距離而改變; 物體越近,音高越高。
加州理工學(xué)院的團(tuán)隊(duì)設(shè)計(jì)了幾種簡(jiǎn)化體驗(yàn)的模式。一種是“聚光燈模式”,用戶可以將他們的臉直接指向一個(gè)物體,并且該特定物體會(huì)通過告訴您它是什么。另一種模式稱為“掃描模式”,其中房間中的物體由CARA掃描。
第三種模式“目標(biāo)模式”允許用戶使用房間中的任何物體作為指導(dǎo)來幫助導(dǎo)航周圍環(huán)境。這種方法與您在博物館使用音頻指南時(shí)的體驗(yàn)非常相似,但是您將收到有關(guān)您周圍環(huán)境的信息。
加州理工學(xué)院生物科學(xué)教授/神經(jīng)生物學(xué)執(zhí)行官M(fèi)arkus Meister表示:“VR和AR的所有技術(shù)都是從場(chǎng)景中獲取信息,然后將其轉(zhuǎn)換為其他用途。”
在加州理工學(xué)院的試驗(yàn)期間,有7名盲人使用HoloLens,目的是導(dǎo)航到二樓辦公室。戴上AR頭顯后,測(cè)試對(duì)象會(huì)收到一條消息,說明導(dǎo)航已經(jīng)開始,然后按照“跟我來”的說明進(jìn)行操作。
通過最少的培訓(xùn),每個(gè)受試者都發(fā)現(xiàn)自己在大廳,兩組樓梯和幾個(gè)角落中航行,導(dǎo)航目的地都通往二樓辦公室。他們的第一次嘗試沒有任何問題,并且因?yàn)樘摂M指南旨在提前幾步,測(cè)試對(duì)象能夠“看到”前面的內(nèi)容。
【93913原創(chuàng)內(nèi)容,轉(zhuǎn)載請(qǐng)注明及回鏈】








