OpenAI深夜上新:ChatGPT能視訊聊天了一鍵共享螢幕、召喚“聖誕老人”
今天凌晨,OpenAI又給ChatGPT的高級語音模式發布了全新視覺功能——即時視訊和螢幕分享。沒錯,你可以直接跟ChatGPT打視訊電話了,還可以分享自己的手機螢幕讓ChatGPT幫你解決各種棘手問題。新增的聖誕老人語音模式也是聖誕節氛圍感拉滿:
視訊可以在進階語音模式中打開,在視訊通話過程中,現場4個嘉賓分別做了自我介紹,而ChatGPT可以記住每個人的名字以及他們對應的樣貌特徵。
例如ChatGPT可以迅速回答出戴著馴鹿角的是誰,或是戴著聖誕老人帽子的人是誰,這種「即時視覺脈絡」能力還是比較驚豔的。
整個視訊通話溝通的過程還是相當流暢的,工作人員介紹,這項功能背後是原生多模態大模型GPT-4o。
後續高階語音功能的對話都會有更自然的對話節奏、更豐富的情緒和50多種語言的支持。
除了一般聊天,ChatGPT還可以一邊視訊一邊教你怎麼泡咖啡,透過鏡頭,它可以辨識出眼前的物體,並進行指導。
例如第一步要做什麼、第二步要做什麼,什麼時候拿起杯子倒水,以及每個步驟在做什麼、有什麼效果、有哪些步驟可以做得更好。
另一個新功能是螢幕分享,這個功能也是在進階語音模式中開啟,開啟後,ChatGPT會看到我們螢幕上正在顯示的內容。
能做什麼?例如當你收到一個訊息不知道該怎麼回复,就可以讓ChatGPT幫你想想對策,它可以識別到你正在使用訊息App並分析對方發來的信息,然後給出一個合理的回复。
最後OpenAI還帶來了一個彩蛋,就是在ChatGPT的對話中加入了“聖誕老人模式”,你可以問聖誕老人各種問題,例如北極生活情況、精靈們在做什麼、如何留一個漂亮的大鬍子,甚至是「你最喜歡的馴鹿是哪一隻?」這樣的刁鑽問題。
//oss.zhidx.com/uploads/2024/12/675b329c2ec53_675b329c2a2a6_675b329c2a284_聖誕老人2.mp4
值得一提的是,在聊天過程中你可以隨時打開視訊模式,讓「聖誕老人」看到攝影機所記錄的內容並進行相關互動,整個過程是比較流暢的。
影片和分享螢幕新功能都會馬上在新的ChatGPT App中推出,不過只有Plus和Pro版用戶可以使用。聖誕老人語音模式在支援ChatGPT語音的地方都可以使用,而且是免費的。