蘋果公司在其相機系統中引入了一項新功能，可以自動識別並轉錄照片中的文字，從名片上的電話號碼到充滿筆記的白板。這項功能被稱為”實時文本”，不需要用戶的任何提示或特殊工作–只要點擊圖標就可以了。

Craig Federighi在WWDC的虛擬舞台上宣布，Live Text將在iOS 15中出現在iPhone上。他用幾張圖片進行了演示，一張是會議結束後的白板，還有幾張快照，背景是餐廳的招牌。

點擊右下角的實時文本按鈕，檢測到的文本就會出現輕微的下劃線，然後輕掃一下就可以選擇和復制。在白板場景下，它收集了幾句包括要點在內的筆記，而對於其中一個餐廳標誌，它成功地抓取了圖中的電話號碼，可以打電話或保存。

它使用“深度神經網絡”掃描“整個系統”的照片，包括網絡上的照片。另外它支持七種語言。此外它還可以識別物體和場景如狗或花。Spotlight 全局搜索功能，現可遍歷用戶收藏的照片。Spotlight搜索聯繫人的功能將更少中斷且還會顯示免打擾狀態。

新功能Live Text能在相機應用中自動進行OCR。當把相機對准文本時它就會跳出來，你可以選擇它、複製它然後粘貼到其他地方，另外你也可以在已有的照片上這樣做。

該功能讓人想起Google長期開發的Lens應用中的許多功能，Pixel 4在2019年增加了更強大的掃描功能。不同的是，在運行新系統的iPhone所拍攝的每張照片中，或多或少都會被動地捕捉到文字–你不必進入掃描模式或啟動一個單獨的應用程序。

這對任何人來說都是一件好事，但它對有視覺障礙的人來說可能特別有幫助。一張或兩張快照使任何文本，否則難以閱讀，能夠被口述或保存。

這個過程似乎完全發生在手機上，所以不用擔心這些信息會被發送到某個數據中心。