ChatGPT在提供高質量、有同情心的醫療建議方面優於醫生
人們普遍猜測,像ChatGPT這樣的人工智能(AI)助手的進展如何能夠用於醫學。今天(2023年4月28日)發表在《美國醫學會雜誌》(JAMA Internal Medicine)上的一項新研究,由加州大學聖地亞哥分校(UCSD)高通研究所的John W. Ayers博士領導,對人工智能助手在醫學中可能發揮的作用進行了早期窺探。
這項研究比較了醫生和ChatGPT對真實世界健康問題的書面答复。一個有執照的醫療專家小組在79%的情況下更喜歡ChatGPT的回答,並認為ChatGPT的回答質量更高、更有同情心。
艾爾斯說:”用人工智能改善醫療保健的機會是巨大的,”他也是加州大學舊金山分校醫學院傳染病和全球公共衛生處的創新副主任。”人工智能增強的護理是醫學的未來。”
在這項新的研究中,研究小組著手回答這個問題: ChatGPT能否準確地回應患者發送給醫生的問題?如果是的話,人工智能模型可以被整合到衛生系統中,以改善醫生對患者所發問題的回應,並減輕醫生不斷增加的負擔。
“ChatGPT可能能夠通過醫學執照考試,”研究報告的共同作者、UCSD奧特曼臨床和轉化研究所共同主任、UCSD醫學院教授戴維-史密斯博士說,”但直接準確和富有同情心地回答病人的問題是一個不同的領域。”
“COVID-19大流行加速了虛擬醫療的採用,”研究報告的共同作者Eric Leas博士補充說,他是高通研究所的成員,也是加州大學聖地亞哥分校赫伯特-沃特海姆公共衛生和人類長壽科學學院的助理教授。”雖然這使患者更容易獲得護理,但醫生卻被大量尋求醫療建議的患者電子信息所困擾,這些信息導致了破紀錄的醫生職業倦怠。”
為了獲得大量不同的醫療問題和醫生回答的樣本,並且不包含可識別的個人信息,該團隊轉向了社交媒體,在那裡有數百萬的病人公開發布醫療問題,而醫生會做出回應: Reddit的AskDocs。
r/AskDocs是一個擁有約452,000名成員的子reddit,他們發布醫療問題,並由經過驗證的醫療專業人士提交答案。雖然任何人都可以對問題作出回應,但版主會驗證醫療保健專業人士的證書,而回應會顯示回應者的證書水平。其結果是一個龐大而多樣的病人醫療問題和來自有執照的醫療專業人士的相應答案。
雖然有些人可能懷疑社交媒體上的問答交流是否是一個公平的測試,但團隊成員指出,這些交流反映了他們的臨床經驗。
該團隊從AskDocs中隨機抽取了195個交流,其中有一位經過驗證的醫生回答了一個公共問題。該團隊向ChatGPT提供了原始問題,並要求它編寫一份答复。一個由三名持證醫療專業人士組成的小組對每個問題和相應的回答進行了評估,並對回答是來自醫生還是ChatGPT進行了盲審。他們根據信息質量和同情心來比較答复,並指出他們更喜歡哪一個。
醫療保健專業人員評估小組在79%的情況下喜歡ChatGPT的回答而不是醫生的回答。
聖地亞哥Human Longevity公司的執業護士、研究報告的合著者Jessica Kelley說:”ChatGPT信息的回應細微而準確,往往比醫生的回應更能解決病人的問題。”
此外,ChatGPT的回答在質量上的評價明顯高於醫生的回答:ChatGPT的回答質量好或非常好是醫生的3.6倍(醫生22.1%,ChatGPT 78.5%)。這些回答也更有同情心:ChatGPT的同情或非常同情的回答比醫生高9.8倍(醫生4.6%,ChatGPT 45.1%)。
加州大學舊金山分校醫學院副臨床教授、研究報告作者之一亞倫-古德曼博士補充說:”我從未想像過會這麼說,但ChatGPT是我想給我的收件箱開的處方。該工具將改變我支持病人的方式”。
“雖然我們的研究將ChatGPT與醫生對立起來,但最終的解決方案並不是將你的醫生完全扔掉,”布林茅爾學院計算機科學助理教授、研究報告的共同作者亞當-波利亞克博士說。”相反,醫生利用ChatGPT是更好的、有同情心的護理的答案。”
“我們的研究是第一批顯示人工智能助手如何潛在地解決現實世界的醫療保健提供問題的研究,”加州大學聖地亞哥分校健康部首席醫療官和首席數字官克里斯托弗-隆赫斯特博士說。”這些結果表明,像ChatGPT這樣的工具可以有效地起草高質量、個性化的醫療建議,供臨床醫生審查,我們正在UCSD Health開始這一過程。”
醫生-生物信息學家、加州大學聖地亞哥分校奧特曼臨床和轉化研究所聯合主任、加州大學聖地亞哥分校醫學院教授、研究報告共同作者Mike Hogarth博士補充說:”重要的是,將人工智能助手整合到醫療保健信息中,要在隨機對照試驗的背景下進行,以判斷人工智能助手的使用對醫生和患者的結果有何影響。”
除了改善工作流程,對人工智能助手信息傳遞的投資可能會影響病人的健康和醫生的表現。
約翰霍普金斯大學計算機科學的John C Malone副教授和研究報告的共同作者Mark Dredze博士指出:”我們可以利用這些技術來訓練醫生以病人為中心的溝通,消除經常通過信息傳遞尋求醫療保健的少數民族人口所遭受的健康差異,建立新的醫療安全系統,並通過提供更高質量和更有效的護理來協助醫生。”