受蝙蝠啟發的眼鏡幫助盲人和視力受損者用聲音”看”東西
受蝙蝠使用迴聲定位的啟發,研究人員開發了智慧眼鏡,它將視覺訊息轉化為獨特的聲音表徵,從而提高盲人和視力受損者導航周圍環境的能力。這項技術可以改變視障人士的世界。輔助技術包括設計各種技術,使感官殘疾人士能夠克服日常生活中的障礙。失明或低視力(BLV)尤其會影響一個人進行日常生活活動以及參與社交活動和互動的能力。
研究人員開發的智慧眼鏡能將視覺訊息轉化為獨特的聲音,幫助盲人”看見”世界
輔助科技研究的一個廣泛領域是利用視覺、觸覺/觸覺和聽覺回饋作為增強感官的手段。現在,雪梨科技大學(UTS)的研究人員開發出了下一代智慧眼鏡,可以將視覺訊息轉化為獨特的聲音圖標,即所謂的”聲學觸覺”,以此幫助無視覺障礙者”看見」。
“智慧眼鏡通常利用電腦視覺和其他感官訊息將配戴者周圍的環境轉化為電腦合成的語音,”該研究的合著者之一林欽騰(音譯)說。”然而,聲學觸摸技術會對物體進行聲學處理,在物體進入設備視野時產生獨特的聲音表徵。例如,樹葉沙沙作響的聲音可能代表植物,嗡嗡聲可能代表手機。 “
研究人員受到蝙蝠使用迴聲定位的啟發,蝙蝠發出的聲波在物體上反彈,返回的迴聲提供了物體的大小和距離等資訊。
FAD 由一套擴增實境眼鏡和一部OPPO Find X3 Pro Android手機組成。Unity Game Engine 2022 可以管理眼鏡的音訊輸入和相機/頭部追蹤輸出。這樣,當物體進入裝置視野時,FAD 就能將其轉化為清晰的聲音圖示。
研究人員在14 名成年參與者身上測試了他們的眼鏡,其中7 人是無視覺障礙者,7 人是被蒙住眼睛的視力正常者,作為對照組。研究包括一個訓練階段、一個坐姿任務(使用FAD 掃描桌子上的物品並發出聲音)和一個站姿任務(探索參與者在雜亂的環境中行走並尋找物品時FAD 的表現)。研究中使用了四種物品:碗、書、杯子和瓶子。
他們發現,穿戴式裝置大大提高了無腦障礙者識別和尋找物品的能力,而無需花費太多的腦力。
研究的第一作者和通訊作者Howe Yuan Zhu 說:”聽覺回饋使用戶能夠非常準確地識別和触摸物體。我們的研究結果表明,聲學觸摸有可能為視障群體提供一種可穿戴的、有效的感官增強方法。”
經過一些調整,聲學觸摸技術可以成為輔助技術的一個組成部分,讓視障人士比以前更好地進入屬於他們的生活環境。
這項研究發表在《PLOS One》雜誌。