突破性的新技術使人們可以通過觸摸來聆聽音樂
馬拉加大學電子系的專家和”儀器和系統電子學”研發小組的成員開發的一個突破性原型,將使聽力損失的人能夠通過觸覺聆聽音樂。它由一個音頻觸覺算法組成,利用”觸覺幻覺”將單音音樂轉化為基於振動的有形刺激。根據研究人員的說法,”這就像’入侵’神經系統,使其接受與發送的真實刺激不同的反應”。
“從長遠來看,我們想實現的是讓那些聽不到的人能夠’聽’到音樂”,本文的主要作者保羅-雷馬奇研究員說,他堅持認為音樂具有影響情緒的力量,以及它可以作為一種治療精神障礙和治療疼痛的可能性。
研究人員預測,這將導致一個可能被帶到音樂會上的便攜式終端,因為這個原型將很容易轉移到智能手機等技術設備上。
繪製音樂地圖
這位年輕的研究人員與馬拉加大學的安德烈斯-特魯希略和費爾南多-維達爾教授合作,開發了一種算法,可以將從MIDI文件–樂器數字接口中提取的音樂特徵和結構轉化為”振動觸覺刺激”。
實驗證明,通過振動感知的”觸覺幻覺”在沒有聽到的人中引起了與原始音樂不同的情緒反應–大部分是積極的。資料來源:馬拉加大學
“這是類似於映射音樂的概念”,雷馬奇解釋說,這種類型的文件不僅可以播放和產生聲音,而且還可以提供”象徵性的表示”。
控制振動
目前的模型並不能保證對音樂的情感反應和振動觸覺版本之間的對應關係。有鑑於此,UMA的這些工程師提出了”觸覺幻覺”的安排,以改善和擴展音樂特徵的頻譜,以運動、方向和位置變化的形式為振動添加動態。他們解釋說:”這是一個具有挑戰性的過程,因為皮膚的可感知頻率範圍低於聽覺系統的頻率範圍,這可能會導致一些音樂特徵的喪失”。
由於馬拉加大學電子系的研究人員設計了一個開創性的原型,有聽力損失的人將能夠通過觸摸的感覺來聽音樂。資料來源:馬拉加大學
不同的情感反應
有50多名志願者參與的首次實驗結果表明,”觸覺幻覺”的安排引起的積極情緒多於消極情緒。它們也被認為比音頻更令人愉快和刺激,激起了與原始音樂不同的情緒反應。
智能儀器和在醫療保健中的應用
第一個原型在科學雜誌LNCS上發表後,在第11屆觸覺和音頻交互設計國際研討會(英國)上進行了展示–這是專門研究這些領域的最大的國際活動。目前,UMA的研究人員正在研究第二個模型並繼續進行實驗。
這項研究是保羅-雷馬甚博士論文的產物,是項目”智能儀器和醫療應用”的一部分。