Skip to content
WONGCW 網誌
  • 首頁
  • 論壇
  • 微博
  • 壁紙下載
  • 免費圖床
  • 視頻下載
  • 聊天室
  • SEO工具
  • 支援中心
  • 表格製作
  • More
    • 在線名片
    • 網頁搜索
    • 天氣預報
    • 二維碼生成器
  • Search Icon

WONGCW 網誌

記錄生活經驗與點滴

OpenAI官宣推出多模態ChatGPT 能看、能聽、還會說

OpenAI官宣推出多模態ChatGPT 能看、能聽、還會說

2023-09-26 Comments 0 Comment

北京時間週一晚間,人工智慧領域的知名創業公司OpenAI發布題為《ChatGPT現在能看、能聽、能說》的公告,宣布將在未來兩週時間裡向付費用戶推送這項功能。在今年3月GPT-4的發表會上,最令人震驚的一幕應該是,OpenAI總裁Greg Brockman拿著一張草稿紙畫了個草圖,隨手拍了張照就讓GPT-4在10秒鐘時間裡產生了這個網站的程式碼。

(圖片來源:OpenAI)
(圖片來源:OpenAI)

ChatGPT先前曾推出能上傳圖片的「程式碼解釋器「功能,具備了一些初步處理圖像和文字照片的能力。但毫無疑問,今天這個「隨手拍、隨心問」才更貼近大多數用戶的AI助理使用場景。

拍冰箱照片告訴你今晚吃啥

依照標題的順序,今天更新的功能主要有兩點:基於圖片的對話,以及即時語音對話。

先說關注度非常高的圖片聊天功能。根據OpenAI的說法,用戶現在可以拍一張冰箱的照片,然後讓ChatGPT來推薦食譜;在旅行時拍攝一張地標的照片,讓ChatGPT來講述這處景點的有趣之處。當然,也能拍一張數學題的照片,讓ChatGPT來解答。

在官方給出的例子中,給到ChatGPT一張自行車的照片,問它如何把座椅調低。然後ChatGPT表示看你車的型號,有的車有快拆桿,有的是用螺栓固定,然後給了詳細的步驟。

隨後官方裝作不懂,拍了一張螺栓的照片,並用官方畫圖工具圈出來以示強調,然後問ChatGPT這是不是快拆桿。ChatGPT表示你這個是螺栓,得去找一個內六角扳手。

隨後官方又拍了一張工具箱的照片,問ChatGPT到底是哪一支扳手。ChatGPT也順利地認出了扳手,並且準確地提示使用者到底要拿哪一個尺寸。

ChatGPT會說話啦!

除此之外,OpenAI也將語音辨識、轉錄和音訊產生功能打包,推出了AI語音聊天的功能,這項功能只適用於iOS和安卓客戶端。官方表示,用戶可以用這項功能為家中的小孩講睡前故事。或是家裡吃著飯,突然為某個問題吵起架來,這時候就可以把ChatGPT拍在桌面上解決爭論。

OpenAI介紹稱,這項功能使用了Whisper開源語音辨識系統,將用戶所說的話轉錄成文字。同時也用上了新的文字轉語音模型,並與專業配音員合作,提供5種可供使用者自行選擇的聲音。

更先進的AI也有新的風險和局限性

OpenAI表示,新的語音技術能夠僅透過幾秒鐘的真實語音創造出逼真的合成聲音。這種功能打開了創造力的大門,也帶來了新的風險——例如不法分子可能會偽造公眾人物進行詐欺。所以OpenAI的決策是透過「語音聊天」這樣的特定用例來推出這項功能。

同時OpenAI也在與更多的機構展開合作。例如串流媒體公司Spotify就在試用這項功能來進行語音翻譯,透過使用播客主持人的聲音將播客音訊翻譯成其他語言,幫助播客主持人擴大他們的全球影響力。

影像也會帶來新的挑戰,例如幻覺問題,以及使用者在高風險領域卻依賴模型對影像的解釋。因此在上線前,OpenAI也對極端主義和科學能力等領域進行了風險測試。

另外對看到這篇文章的中文讀者來說,圖片對話的體驗大概率值得期待,但語音對話可能要打一些折扣。OpenAI表示,該模型擅長轉錄英文文本,但在一些其他語言,特別是那些使用非羅馬字母的語言中表現不佳,建議非英語使用者不要使用ChatGPT來進行此類用途。

分享此文:

  • 按一下即可分享至 X(在新視窗中開啟) X
  • 按一下以分享至 Facebook(在新視窗中開啟) Facebook
  • 分享到 WhatsApp(在新視窗中開啟) WhatsApp
  • 按一下以分享到 Telegram(在新視窗中開啟) Telegram
  • 分享到 Pinterest(在新視窗中開啟) Pinterest
  • 分享到 Reddit(在新視窗中開啟) Reddit
  • 按一下即可以電子郵件傳送連結給朋友(在新視窗中開啟) 電子郵件
  • 點這裡列印(在新視窗中開啟) 列印

相關


網絡資訊

Post navigation

PREVIOUS
勒索軟體組織聲稱已入侵”索尼的所有網路” 並正在出售數據
NEXT
消息指出iPhone 16將在電源鍵一側新增電容式”捕捉”按鈕

發表迴響取消回覆

這個網站採用 Akismet 服務減少垃圾留言。進一步了解 Akismet 如何處理網站訪客的留言資料。

More results...

Generic filters
Exact matches only
Search in title
Search in content
Search in excerpt
Filter by 分類
網站公告
Featured
限時免費
Windows 軟件下載
系統軟件
辦公軟件
圖像處理
影音媒體
網絡軟件
應用軟件
Mac 軟件下載
安卓軟件下載
網絡資訊
Mac資訊
Linux資訊
VPS資訊
NASA資訊
WordPress資訊
WeChat資訊
PHP資訊
教學資源
開源程序
網頁工具
SEO工具
醫療健康
其他資訊
Content from
Content to
2023 年 9 月
一 二 三 四 五 六 日
 123
45678910
11121314151617
18192021222324
252627282930  
« 8 月   10 月 »

分類

  • 網站公告
  • 限時免費
  • Windows 軟件下載
  • 系統軟件
  • 辦公軟件
  • 圖像處理
  • 影音媒體
  • 網絡軟件
  • 應用軟件
  • Mac 軟件下載
  • 安卓軟件下載
  • 網絡資訊
  • Mac資訊
  • Linux資訊
  • VPS資訊
  • NASA資訊
  • WordPress資訊
  • WeChat資訊
  • PHP資訊
  • 教學資源
  • 開源程序
  • 網頁工具
  • SEO工具
  • 醫療健康
  • 其他資訊

彙整

近期文章

  • NEO半導體將模仿快閃記憶體製造512GB記憶體採用3D X-DRAM結構進行堆疊 2025-05-22
  • 高合汽車或將復活:全新公司成立註冊資本超10億 2025-05-22
  • 電影《尋秦記》宣布2025賀歲檔上映古天樂等原班人馬回歸 2025-05-22
  • 2025年版Model 3歐洲NCAP測驗成績公佈:五星 2025-05-22
  • 彩虹-YH1000無人物流機首飛成功一口氣能飛1500公里 2025-05-22
  • 微軟正在開發Windows 11/Android跨裝置復原功能 2025-05-22
  • 全球TWS耳機出貨量最新排名:小米殺上第二首度突破900萬副 2025-05-22
  • 用印度程式設計師假扮AI的獨角獸宣告倒閉微軟亞馬遜都曾被坑 2025-05-22
  • 福特CEO驚嘆中國車企研發速度:只有傳統車廠一半時間 2025-05-22
  • 儘管創辦人面臨法律風險Telegram獲利仍躍升至5.4億美元 2025-05-22

熱門文章與頁面︰

  • 微軟員工再次擾亂Satya Nadella 的主題演講
  • Google製作了專門針對UI設計的AI開發工具
  • 您可以在Windows 11 24H2 中找回WordPad
  • ROG NUC 2025迷你遊戲PC上市:Ultra 9 275HX+RTX 5080首發24999元
  • 索泰展示全球最小RTX 5060 Ti 16GB主機機箱容量僅2.65公升
  • 半導體資本支出驟降代工巨頭擴張速度減緩
  • 一文看懂Google I/O 2025開發者大會: Android、Chrome、搜尋、Gemini
  • 打車叫到特斯拉不會開門很尷尬?官方介紹開關門方法
  • z-sms – 在線免費云短信臨時手機號接碼平台網頁版
  • 六年後Razer終於為Mac帶來了Synapse配置實用程式

投遞稿件

歡迎各界人士投遞稿件到admin@wongcw.com

請提供以下資料:

1.你的名字

2.你的電郵

3.分類目錄

4.文章標題

5.文章摘要

6.文章內容

7.文章來源

 

聯繫我們

查詢,投稿,商務合作:
​admin@wongcw.com
​技術支援:
​support@wongcw.com
​客户服務:
​cs@wongcw.com

QQ群:833641851

快帆

MALUS

極度掃描

DMCA.com Protection Status

WONGCW 網誌

  • 免責聲明
  • 捐助我們
  • ThemeNcode PDF Viewer
  • ThemeNcode PDF Viewer SC
  • Events

服務器提供

本站使用之服務器由ikoula提供。

聯繫我們

查詢,投稿,商務合作:
​admin@wongcw.com
​技術支援:
​support@wongcw.com
​客户服務:
​cs@wongcw.com

QQ群:833641851

© 2025   All Rights Reserved.