蘋果探索優勢眼追踪方案改善VR/AR視覺體驗
有多個消息表明蘋果正在秘密開發自己的VR/AR 頭戴設備,相關的專利也不斷浮出水面,顯示蘋果打算如何改進方案,以提升設備的各項體驗。一項最近新公佈的專利中我們了解到,蘋果正在探索如何通過了解用戶的優勢眼來改善其VR 和AR 設備,幫助提高眼球檢測系統的工作方式,從而使佩戴者獲得更好的使用體驗。
優勢眼意指一個人更倚重左眼或者右眼看到的東西。這對於理解人們如何處理他們的視覺信息至關重要。根據大腦更喜歡使用哪隻眼睛作為其主要信息源,優勢眼不同的人可能會對相同的物理對像或場景有不同的看待方式。
該研究主題在VR 和AR 領域中尤為重要。因為通過這樣的跟踪技術,遊戲和應用程序會針對雙眼分別產生略微不同的數字場景和應用項目,從而影響用戶眼中虛擬世界的仿真效果。
知道哪隻眼睛是優勢眼可以給應用開髮帶來許多好處。例如可以通過特意定位優勢眼所看到的位置來幫助改善眼球跟踪。除此之外,這對於用戶視力不正常的情況(例如弱視)也有益處,因為非跟踪系統在渲染場景時可能不會考慮類似的損傷。
同時,開發者也可以使VR/AR 系統給優勢眼提供更細節的圖像,從而節省信息資源浪費。例如,基於眼球跟踪的景深效果可以在應用時使用優勢眼的視線。
在由美國專利商標局公佈的專利申請中,“用於檢測優勢眼的眼球跟踪系統和方法”使用圖像和眼球跟踪來評價用戶每隻眼睛的準確度。最終,具有較高準確度得分的眼睛是優勢眼;如果雙眼表現相似,則可以認為它們具有同等優勢。
專利文檔建議可以通過向每隻眼睛顯示基於其凝視點偏差的多個圖像來測量其分數。這樣的測量可以創建用戶的優勢眼特徵,然後使用該特徵來調整為其每隻眼睛發送的圖像。
通過使用多點追踪,蘋果系統可以計算每隻眼睛的3D 位置和方向,以及每隻眼睛的注視矢量,從而進一步幫助計算雙眼整體和單眼各自的凝視準確度。
一旦確定分數,AR 和VR 的應用處理系統可以權衡決定只使用優勢眼的信息數據。例如,繪畫用戶界面可以看到用戶每隻眼睛分別選擇的物體,但是僅使用優勢眼所選擇的物體位置。
儘管蘋果每週都會提交專利申請,也表明了公司在該研究領域的濃厚興趣,但這並不能保證這些技術或創意能夠成為未來的產品或服務。
據信蘋果已經對VR 或AR 設備進行了多年的研究工作。這些努力可能會在2020 年給我們帶來一副AR 智能眼鏡。多年來,它已經收集了許多相關技術的專利,甚至已經嘗試在已有產品中公開應用,比如在macOS 上使用VR 和在iOS 上引入ARKit。
對於眼球追踪領域,蘋果2017 年收購了SensoMotoric Instruments,這是一家專門從事該領域研究的德國硬件公司。在專利方面,蘋果已經研究瞭如何構建能夠靠近用戶臉部而不是直接安裝在面前的眼睛跟踪系統,這會使其更適用於頭戴耳機。
2018 年的專利申請包括一項反射紅外線同時允許可見光通過的“熱鏡”技術,並且該技術還可有效地拾取多個其他要素,例如瞳孔擴張和眼瞼閉合。
2015 年,蘋果獲得了基於凝視的眼動追踪專利。這可以讓人通過凝視屏幕來控制iOS 或macOS 設備,還能緩解影響視覺互動的特克勒斯(Troxler)效應。