研究人員研發一種手腕設備可以連續跟踪整個手部情況
來自康奈爾大學和威斯康星大學麥迪遜分校的研究人員宣布開發出一種新的腕式設備,能夠連續對人類的整個手部進行3D追踪。該設備名為FingerTrak,可以將人手許多位置轉化為3D信息,包括20個手指關節位置的信息。
FingerTrak使用三到四個微型、低分辨率熱像儀,讀取手腕上的輪廓。研究人員表示,該設備可用於翻譯手語或用於虛擬現實。它還可以用於移動醫療、人機互動以及其他領域。該項目的科學家表示,該通過觀察手腕輪廓,該技術能夠以3D方式高精度重建手指所在的位置。這是第一個能夠根據手腕輪廓重建完整手部姿勢的系統。
過去,手腕安裝的攝像頭太過笨重和礙事,不適合日常使用。儘管體積龐大,但大多數只能重建一些離散的手勢。突破性的FingerTrak系統是一個輕巧的手鐲,可以讓手部自由活動。該設備專注於熱成像和機器學習的結合,以虛擬重建手部動作,而不是依靠攝像頭直接捕捉手指的位置。
設備上使用的4個微型熱像儀每個都有豌豆大小,可以拍攝多個剪影圖像,形成手的輪廓。該系統可以將這些圖像結合起來,利用深度神經網絡對虛擬手進行3D重建。該技術可以捕捉整個手的姿勢,即使手中拿著一個物體。