Google Lens現在可以讓用戶拍攝影片進行搜尋
如果僅憑一張圖片無法捕捉到您想要搜尋的內容,Google Lens 現在可以讓您拍攝視頻,甚至可以用語音詢問您所看到的內容。 該功能將根據影片內容和你的問題顯示人工智慧概述和搜尋結果。 該功能今天將在Android 和iOS 的搜尋實驗室中推出。
Google在5 月的I/O 大會上首次預覽了使用影片進行搜尋。 例如,Google表示,如果有人對在水族館看到的魚感到好奇,可以將手機舉到展品前,打開Google Lens 應用程序,然後按住快門按鈕。 一旦鏡頭開始錄製,他們就可以說出自己的問題:「為什麼它們會遊在一起?」然後,Google Lens 會使用Gemini人工智慧模型作出回應,就像你在下面的GIF 中看到的那樣。
Google在提供回應時會考慮您的影片和問題。
在談到該功能背後的技術時,Google 工程副總裁Rajan Patel 介紹說,Google 正在將視頻”捕捉為一系列圖像幀,然後應用相同的計算機視覺技術”。 但是,Google將更進一步,將訊息傳遞給一個”定制”的Gemini 模型,該模型是為了”理解多幀序列……然後提供植根於網絡的響應”而開發的。
目前還不支援識別影片中的聲音,例如您試圖識別聽到的鳥叫聲,但帕特爾說這是Google一直在”嘗試的”。
也可以使用語音詢問有關照片的問題
Google Lens 也更新了照片搜尋功能,可以用語音提問。 要嘗試一下,請將相機對準拍攝對象,按住快門按鈕,然後提問。 在此之前,你只能在拍攝照片後在Lens 中輸入問題。 語音提問將在全球Android 和iOS 平台上推出,但目前只有英文版。