“語意聽覺”耳機技術可以使某些環境聲音不被屏蔽
降噪耳機是阻隔世界上大聲說話者和混亂咖啡店背景聲的好幫手,但如果有些聲音是你想聽到的呢?這就是新型”語意聽覺”實驗系統即將問世的原因。這項技術目前由華盛頓大學的科學家開發,它結合了在智慧型手機上運行的深度學習演算法,而智慧型手機則與一套第三方降噪耳機無線連接。
一對支持語意聽覺的降噪耳機在華盛頓大學校園內接受測試
環境音訊從耳機的噪音監測麥克風串流到手機上的一個應用程序,經過數位過濾後,大部分聲音被阻隔,只有少數聲音能被聽者聽到。反之,它也可以阻隔一些不必要的聲音,而讓所有其他聲音通過。目前有20 種可允許和/或屏蔽的聲音選擇。
至少從目前來看,智慧型手機肯定是其中的一部分。這是因為耳機本身或雲端伺服器上的電子設備功能不夠強大,速度不夠快。
研究論文的資深作者希亞姆-戈拉科塔(Shyam Gollakota)教授說:”理解鳥的聲音並將其從環境中的所有其他聲音中提取出來需要實時智能,而目前的降噪耳機還無法做到這一點。挑戰在於,耳機佩戴者聽到的聲音需要與他們的視覺感官同步。你不可能在別人跟你說話兩秒鐘後才聽到他的聲音,這意味著神經演算法必須在百分之一秒內將聲音處理完畢。”
在公園、街道和辦公室等環境中對22 名志工進行測試時,新研發的語義聽覺系統成功地提取了目標聲音,如鳥叫聲、警報聲和警笛聲。不過,還需要做一些工作,因為該技術難以區分類似的聲音,如人類說話聲和歌聲。
您可以在下面的影片中親自感受一下語義聽覺系統的效果: