在宣布對其企業級Copilot人工智慧產品套件進行一系列更新一周後，微軟將在Windows 上為所有用戶推出新的Copilot 功能，其中包括一款能夠理解並回答有關螢幕上內容的問題的工具。

更新後的Copilot 應用程式將於今天在iOS、Android、Windows 和Web 上推出，正如微軟所描述的那樣，所有這些應用程式都採用了更加”溫暖”和”獨特”的Copilot 風格。 微軟也將把該聊天機器人引入WhatsApp，讓用戶透過DM 與Copilot 聊天，類似於在Meta 訊息平台上與其他機器人聊天的體驗。

Copilot Vision 可以查看您在PC 上瀏覽的內容，更確切地說，它可以透視您使用Microsoft Edge 造訪的網站。 Copilot Vision 可以分析網頁上的文字和圖像，並回答有關這些文字和圖像的查詢（例如，”這張圖片中食物的配方是什麼？）

在Edge 的網址列中輸入”@copilot”就可以調出Vision，它並不是什麼技術奇蹟。 Google在Android 上提供了類似的搜尋技術，最近也將該技術的片段引入了Chrome 瀏覽器。但微軟表示，與先前的螢幕分析功能相比，Copilot Vision 功能更強大，也更注重隱私保護。

毫無疑問，為了避免又一輪因人工智慧隱私失誤而引發的負面新聞，微軟強調Copilot Vision 的設計目的是在對話結束後立即刪除資料。 該公司聲稱，經過處理的音訊、圖像或文字不會被儲存或用於訓練模型，至少在這個預覽版本中不會。

Copilot Vision 可解釋的網站類型也受到限制。 目前，微軟暫時禁止該功能處理付費內容和”敏感”內容，將Vision 限制在一個預先批准的”熱門”網站清單中。到底什麼是”敏感”內容？ 色情？ 暴力？ 目前，微軟不願透露。

最近，利用人工智慧工具繞過付費牆的指控讓微軟陷入了法律糾紛。 在一項正在進行的訴訟中，《紐約時報》聲稱微軟允許用戶透過必應Copilot 聊天機器人提供《紐約時報》的文章，從而繞過其付費牆。 據《泰晤士報》稱，Copilot（由微軟的緊密合作者OpenAI 的模型提供支援）在收到某種提示時，會逐字（或接近逐字）提供付費文章的片段。

微軟表示，Copilot Vision 目前僅限於美國，它將尊重網站的”機器可讀的人工智慧控制”–例如禁止機器人為人工智慧訓練搜尋資料的規則。 但該公司尚未說明具體Vision 將尊重哪些控制；有幾種在使用。

許多大型出版商已經選擇阻止人工智慧工具對其網站進行搜索，這不僅是擔心他們的數據會在未經許可的情況下被使用，同時也是為了防止這些工具導致其伺服器成本飆升。 如果目前的趨勢保持不變，Copilot Vision 可能無法在一些頂級新聞網站上運作。

微軟表示將致力於”聽取回饋”，以消除人們的疑慮。

與”視覺”功能一樣，Copilot 的新功能”深入思考”（Think Deeper）也是為了讓微軟的助手功能更全面。

微軟表示，”深入思考”讓Copilot 有能力推理出更複雜的問題，這要歸功於”推理模型”，它需要更多的時間才能逐步給出答案。微軟在一篇部落格文章中寫道：”我們設計的Think Deeper 可以幫助解決各種實際的日常挑戰，例如並列比較兩個複雜的選項。從解決棘手的數學問題到權衡管理家庭專案的成本，Think Deeper都能提供幫助。

微軟在新聞資料中對Think Deeper 的潛力大加讚賞。 但是，假設下面的模型是o1，那麼它肯定會在某些方面存在不足。 我們很想知道微軟對基礎模型進行了哪些改進，以及Think Deeper 對其局限性的坦誠態度。

從今天起，澳洲、加拿大、紐西蘭、美國和英國的部分Copilot Labs 用戶將可使用Think Deeper。

Copilot Voice（不要與GitHub 的Copilot Voice 混淆）是Copilot 今天普遍推出的新功能。 語音”首先在新西蘭、加拿大、澳大利亞、英國和美國推出英語版本，它增加了四種合成語音，讓您可以與Copilot 對話，並大聲說出它的回應。

就像OpenAI 用於ChatGPT 的Advanced Voice Mode 一樣，Copilot Voice 可以在對話過程中捕捉您的語氣並做出相應的回應，而且您可以在Copilot Voice 回答問題時隨時插話。

有一點要注意： Copilot Voice 有使用時間限制。 微軟告訴我，Copilot Pro 用戶可以獲得更多的通話時長，但數量是”可變的”，取決於需求。

微軟表示，由於有了新的個人化設置，Copilot 很快就會變得更符合你的喜好和偏好。啟用該設定後，Copilot 將利用你過去的互動和歷史記錄，以及你與其他微軟應用程式和服務（微軟沒有透露是哪些）的互動，向你推薦使用Copilot 的方法。

微軟在一篇部落格文章中寫道：”這有助於你開始使用，既提供了Copilot 實用功能的便捷指南，也提供了對話的開場白。”

Copilot中的個人化功能可以在Windows的Copilot設定選單中關閉。 但其他地區的用戶應該會在今天下午開始看到這項設定。

微軟和歐盟在該公司的人工智慧產品推廣方面一直關係緊張。 今年5 月，歐盟警告微軟，根據該集團的線上管理制度–《數位服務法案》（Digital Services Act），微軟可能會被處以高達其全球年營業額1% 的罰款，原因是該公司未能回應一項針對其人工智慧生成工具的資訊請求。

微軟以外的一些科技巨頭，包括蘋果和Meta，在歐盟推出人工智慧工具時都採取了謹慎的態度，生怕觸犯該集團有關資料隱私和模型部署的法律。