蘋果ARKit 3.5發布與iPad Pro搭配使用更佳
2020年3月24日, ARKit 3.5版本正式上線。蘋果表示,ARKit 3.5將使用iPad Pro上的LiDAR掃描儀和深度感應系統,提供更為真實的AR體驗。借助全新的Scene Geometry API,用戶可以實時進行3D捕捉,進一步增強了場景理解和物體遮擋。
值得說明的是,激光雷達(LiDAR光探測和測距)是 iPad Pro 2020獨有的攝像頭模塊配置,能夠通過測量光觸及物體並反射回來所需的時間來確定距離。
特製的激光雷達掃描儀能夠利用直接飛行時間(dToF),測量室內或室外環境中從最遠五米處反射回來的光;它可從光子層面進行探測,並能以納秒速度運行。
不僅如此,激光雷達掃描儀能夠與後置雙攝像頭、運動傳感器以及iPadOS 內的架構協同合作,進行深度測量——如此以來,在激光雷達的加持下,iPad Pro 2020 為增強現實(AR)添加了更多想像空間。
在開發者網站上,蘋果列舉了ARKit 3.5的三方面改變:
- 場景幾何:用戶可以使用地板、牆壁、天花板等標籤創建空間立體圖,同時,基於對現實世界場景的理解,ARKit 3.5 解鎖了對象遮擋和現實世界的物理原理,提供了更多信息增強AR 工作場景。
- 即時AR:iPad Pro 上的LiDAR 掃描儀可實現快速平面檢測,無需掃描就能夠在現實世界中即時放置AR 對象。iPad Pro 會自動為所有使用ARKit 構建的應用啟用即時AR 放置,無需進行代碼更改。
- 改進的動作捕捉和人物遮擋:iPad Pro 上的ARKit 3.5 對人遮擋的深度估計核對動作捕捉的高度估計都更為準確,這兩個功能在同樣支持iPad Pro 上的所有應用,無需進行代碼更改。
ARKit是蘋果在2017年推出的增強現實開發平台,能夠把iPhone相機、動作傳感器以及圖形處理器等硬件特性與深度感應、人造光渲染等精密算法相結合,讓開發者們將更多AR應用代入到iOS設備;可以說,ARKit的推出是蘋果進軍AR的第一步。
在每年6 月WWDC 大會,蘋果都會將ARKit 進行升級更新,具體表現在:
- 2017 年,ARkit 面世,功能主要包括快速和穩定的運動追踪、具有基本邊界的平面估算;
- 2018 年,ARKit 2 發布,主要進行了兩項更新——與Pixar 合作的新的文件格式USDZ 和多人共享AR;
- 2019 年,ARKit 3 上線,引入了實時人體遮擋、動作捕捉與跟踪、能夠同時使用硬件設備的前後置攝像頭、面部表情AR 體驗等。
在以往的更新迭代中,ARkit 多是圍繞軟件和算法層面的升級改造,在2017 年與2018 年的更新中,ARKit 所依賴的硬件多為基本的攝像頭配置,如iPhone 8 等。到了2019 年,ARKit 的升級逐漸與硬件層面結合,ARKit 3 基於iPhone X 等機型上TrueDepth 相機,新增了多臉追踪等功能。
從最新的ARkit 3.5 版本來看,蘋果更進一步地推動ARkit 與硬件方面的結合——ARkit 3.5 帶來的三個新變化中,就有兩個與 iPad Pro 的激光雷達掃描儀相關。
不難看出,對於ARkit 的發展方向,蘋果已改變了思路。