手部跟踪在增強現實應用中非常有用，因為它提供了易於使用的自然用戶界面來與數字信息交互，但它通常需要特殊的深度傳感器和獨立處理器等密集且昂貴的技術。谷歌的增強現實的願景是使用Google Glass一般輕便的可穿戴設備來完成這一操作。今天，一種新的手勢追踪方法被披露，它只使用前置攝像頭和基於AI算法的處理流程，就可以進行非常準確的手部跟踪。

該技術的主要創新是使用傳統算法來檢測手掌，然後使用基於AI的模型來預測手指的位置，並將這一運算代碼命名為MediaPiPe的跨平台框架。

MediaPipe可以在手和手指上最多映射21個點，精度高達96％，並且可以在移動設備上完成所有操作（即不在雲端）。

我們可以想像Google會在他們的獨家設備上使用它，目前傳聞中的Pixel 4已經包括用於手勢控制的Soli傳感器。理想情況下，新技術的出現將使創建豐富的AR體驗變得容易和便宜，並且能夠創建廉價但功能強大的AR眼鏡。