在央視《贏在AI+》節(jié)目中，智音無(wú)礙科技創(chuàng)始人凌志鵬演示了一項(xiàng)AR眼鏡的新“玩法”：當(dāng)聽(tīng)障人士打手語(yǔ)時(shí)，眼鏡將實(shí)時(shí)翻譯成語(yǔ)音；當(dāng)健全人說(shuō)話時(shí)，鏡片則會(huì)顯示文字。
?
傳統(tǒng)助聽(tīng)設(shè)備雖能提供一定幫助，但無(wú)法真正解決聽(tīng)障人士與健聽(tīng)人之間的雙向、多輪復(fù)雜溝通難題。為助力聽(tīng)障人士無(wú)障礙交流，凌志鵬團(tuán)隊(duì)經(jīng)過(guò)上千次手語(yǔ)數(shù)據(jù)采集，無(wú)數(shù)次大模型訓(xùn)練，從零構(gòu)建知音聾啞人AI無(wú)障礙系統(tǒng)，并配套研發(fā)出了知音AR眼鏡。這套系統(tǒng)搭載了兩項(xiàng)核心技術(shù)：語(yǔ)音識(shí)別與反向手語(yǔ)識(shí)別技術(shù)。?

升級(jí)后的語(yǔ)音識(shí)別功能，除具備市面上常見(jiàn)的語(yǔ)音識(shí)別能力外，還新增提示詞敏感詞識(shí)別與聲源定位功能。當(dāng)有人呼叫聽(tīng)障人士姓名時(shí)，其佩戴的眼鏡會(huì)突出顯示敏感點(diǎn)，同時(shí)通過(guò)四個(gè)麥克風(fēng)進(jìn)行聲場(chǎng)測(cè)試，精準(zhǔn)判斷聲源位置，并識(shí)別音色特征，如判斷呼叫者是男是女、年長(zhǎng)還是年幼等。此外，對(duì)于汽車?guó)Q笛、鳥(niǎo)叫、流水等各類聲音，產(chǎn)品會(huì)用特定小符號(hào)代表其含義并顯示在眼鏡上，讓聽(tīng)障人士“看見(jiàn)”聲音。?

更具突破性的是反向手語(yǔ)識(shí)別技術(shù)。通過(guò)眼鏡上的廣角攝像頭捕捉聽(tīng)障人士前方95度左右的手語(yǔ)動(dòng)作，經(jīng)AI大模型推斷語(yǔ)義后翻譯成語(yǔ)音輸出，實(shí)現(xiàn)了手語(yǔ)與語(yǔ)音的雙向?qū)崟r(shí)翻譯，填補(bǔ)了國(guó)內(nèi)技術(shù)空白。?

北京冬殘奧會(huì)賽事期間，無(wú)障礙導(dǎo)航系統(tǒng)、AI手語(yǔ)播報(bào)機(jī)器人等科技應(yīng)用首次大規(guī)模落地，為全球殘障運(yùn)動(dòng)員提供“無(wú)差異”服務(wù)體驗(yàn)；智能電動(dòng)輪椅搭載自動(dòng)駕駛模塊，可自主避障、爬坡，并通過(guò)手機(jī)APP遠(yuǎn)程控制；腦控打字系統(tǒng)可以利用非侵入式腦機(jī)接口，幫助漸凍癥患者意念交流……這種科技向善的圖景正在全國(guó)鋪展。?