據信蘋果公司正在研發某種虛擬現實或增強現實硬件，還被認為正在研發Apple Glass AR智能眼鏡。雖然產品還沒有推出，但蘋果已經在該領域進行了廣泛的研發。

蘋果的增強現實計劃可能涉及創建用戶手指的3D模型，用於與虛擬觸摸屏互動，而使用紅外光學標記可能會使AR系統更容易調整iPhone或iPad屏幕上看到的內容。在周二美國專利和商標局授予蘋果的一對專利中，蘋果試圖在兩個方面改進AR。

AR可以提供的好處之一是在用戶視野範圍內的任何地方向用戶展示一個虛擬顯示屏。這種虛擬顯示屏可以很容易地疊加到牆上或物理物品上，甚至可以讓其懸掛在半空中。對於期望能夠同時使用智能手機和平板電腦的用戶來說，使用AR頭顯可能會帶來問題，因為無法保證在頭顯內真的可以看到顯示屏。

還有一種可能是AR頭顯利用移動設備的存在作為用戶的交互方式，有可能用不同的圖形，或者更容易看到的版本取代設備顯示屏上的內容。甚至可以在完全關閉設備屏幕的情況下，在AR頭盔內完全看到顯示屏，同時保持觸摸功能和其他功能的完整性。

在這項名為”帶有光學標記的電子設備”的專利中，蘋果認為可以通過讓AR系統更容易檢測到智能手機就在附近，從而提高智能手機和AR耳機之間的互操作性。在該專利中涉及到添加頭顯可以使用的視覺標記。

人眼看不見的標記可以告訴AR系統它是什麼樣的設備，以及它的方向。這個想法是，在設備外部附著有標記，可以被AR頭顯上的攝像頭和其他傳感器讀取。通過看到這些標記，這可以讓AR系統計算出它是什麼樣的設備，它的方向，顯示屏在哪裡，以及其他因素。

這些標記可以提供定位數據，以及其他信息，如獨特的標識符，通過二維條碼提供。這個唯一標識符甚至可以是使用帶有”光譜反射碼”的標記。雖然這些標記可以讓用戶看到，但蘋果提出這些標記實際上可以讓用戶完全看不到。可能由聚合物層中的光致發光顆粒形成，或者使用透明球體的逆反射層，這些標記物只能通過紅外光來實現可見。

一個AR系統可能打算讓應用在牆上的虛擬顯示屏作為觸摸屏操作，但由於牆上沒有傳感器來檢測觸摸，它不能檢測觸摸。使用手套或其他輸入機制來檢測牆上虛擬顯示屏的觸摸可能是可行的，但在沒有手套的情況下進行檢測是一個比較棘手的問題。蘋果第二項名為”生成用於視覺觸摸檢測的指尖3D模型”的專利試圖解決這個問題。

正如名稱所詳述的那樣，該專利圍繞著一個創建用戶指尖、手指或手的3D模型的系統。一旦生成模型，該模型就可以通過系統分析成像傳感器數據進行檢測，以檢測虛擬顯示屏的有目的觸摸。該模型可以通過監測用戶的手在接觸實際的觸摸敏感表面，它使用多個攝像頭或成像傳感器，可以從多個角度捕捉手指或手在觸摸物體時的情況。