蘋果完善AR和VR頭顯的視頻壓縮和触覺反饋功能
蘋果正在繼續開發和完善”蘋果眼鏡”等頭戴式設備的技術,包括視頻壓縮方法和方向性觸覺反饋。據悉蘋果正在研發兩款不同的頭顯,包括一款利用蘋果VR技術的混合現實頭戴式設備和上述的蘋果AR設備。週二,蘋果獲得了兩項專利,可以適用於這兩種頭顯。
在第一項名為”具有方向性觸覺輸出的電子設備”的專利中,蘋果概述了一種可以”相對於設備外殼表面(如側壁表面或其他設備表面)的給定方向提供觸覺反饋的方法。首先,蘋果概述了觸覺反饋的一些問題,包括輸出太弱或提供不想要的感覺。此外,它還表示,一些系統可能提供的觸覺輸出並沒有應用到用戶身體的適當位置。蘋果還指出,觸覺輸出設備可能過於笨重。
雖然看起來蘋果這項專利所述的技術並不是專門針對頭顯,但蘋果也指出,該系統的操作方法可以同時使用頭戴式設備和手機。該方法將包括一個運動傳感器收集用戶輸入,以相對於顯示屏中的其他虛擬對象移動一個虛擬對象。當用戶施加一定的力或物體與周圍其他虛擬物體互動時,系統將應用方向性反饋,提供對便攜式電子設備進一步移動的阻力感。
第二項名為”視頻壓縮方法和設備”的專利更清晰地概述了一種頭戴式設備的方法。這項專利的重點是基於”包括頭戴式顯示器和基站的混合現實係統”的系統。蘋果在專利當中表示,頭顯傳感器套件收集的數據可以通過有線或無線連接傳輸到基站。
渲染引擎地根據傳感器信息渲染包括虛擬內容的幀,編碼器在通過連接將幀發送到頭顯之前,根據編碼協議對幀進行壓縮。在編碼器中不是使用之前的幀來估計運動矢量,而是將頭顯和渲染引擎的運動矢量輸入到編碼器中,並用於壓縮幀。
視頻壓縮將是頭戴式設備的重要組成部分,尤其是有傳言稱它們將使用一套攝像頭和超高分辨率8K顯示屏進行視頻輸出。蘋果在這裡概述的系統設想了一種方法,可以減少在基站上對渲染幀進行編碼後再傳輸到頭顯的時間。
此外,蘋果還指出,可能會有一些特定的幀沒有正確地傳輸到頭顯的時候。在這些情況下,蘋果表示,AR或VR設備可能會使用運動矢量從上一幀中合成一幀。確保視頻輸出的流暢性。這些特定的幀既可以是用戶的實際周圍環境,也可以是任何數量的虛擬物體和動畫。兩者結合在一起,就能提供一種混合現實或MR的效果。
蘋果每週都會提交大量的專利,其中描述的許多技術最終都不會出現在消費產品中。專利和專利申請也沒有說明某項功能或系統何時可能會進入市場。