加州大學洛杉磯分校研究人員創造了一種可穿戴手套可以實時翻譯手語
加州大學洛杉磯分校的生物工程師們設計了一款手套,可以利用智能手機應用程序將美國手語實時翻譯成英語語音。該項目的目標是方便使用手語的人與不懂手語的人直接交流,而不需要人在那裡翻譯。
該團隊還認為這款手套可以幫助更多的人學習手語。該系統是一副手套,手套上有薄薄的、可拉伸的傳感器,這些傳感器沿著五個手指的長度向上延伸。傳感器由導電紗線製成,可以接收到手部動作和手指位置,這些動作和手指位置代表手語中的單個字母、數字、單詞和短語。
該設備可以將手指動作轉化為電信號,發送到戴在手腕上的一塊美元大小的硬幣電路板上。該電路板可以將信號無線傳輸到智能手機上,智能手機以每秒約一個字的速度將其翻譯成口語。研究人員還在測試手套的人臉上放置了傳感器。傳感器被放置在眉毛之間和嘴的一側,以捕捉作為美國手語一部分的面部表情。
研究人員表示,之前的可穿戴系統翻譯手語的作用有限,因為它們笨重,或者佩戴起來不舒服。加州大學洛杉磯分校團隊創建的輕量級可穿戴系統由廉價的材料製成,也能使用很長時間。電子傳感器也很靈活,價格也很實惠。
該團隊表示,該系統在對四名使用美國手語的聾啞人的測試中表現良好。每位參與者分別做了15次手勢,定制的機器學習算法將手勢變成了字母、數字和單詞的代表。該系統可以識別660個手勢,包括每個字母和數字0到9。但是,它的商業模式需要改進,以支持更廣泛的詞彙和更快的翻譯時間。