Categories: 科技新聞

ChatGPT 幾乎通過美國醫生執照試 得分接近及格線

Published by
Oscar
Share

據外媒報導,人工智能聊天機械人 ChatGPT 最近幾乎通過美國醫師執照考試(US Medical Licensing Exam (USMLE)),得分達到或接近 60 分及格線。

 

眾所週知醫生執業試以高難道見稱。上周四(2 月 9 日)美國期刊《PLOS Digital Health》發表研究報告指,ChatGPT 「應考」了美國醫師執照考試,挑戰 2022 年 6 月版 376 條試題中的 350 條試題,最終取得的成績達到或接近及格線。研究人員更指 ChatGPT 有份協助撰寫研究報告。

 

美國醫師執照考試實際上由三個考試組成,涵蓋由基礎科學概念到生物倫理等所有內容,一般需要 300 – 400 小時準備時間。據研究人員在論文指,ChatGPT 在未經專門訓練或強化的情況下,在 3 個部份分別取得 52.4 至 75 分的成績,達到或接近 60 分及格線。

 

研究人員表示, ChatGPT 能提供每個回答背後的理據,在考試的解釋中表現出高水平的洞察力和一致性。值得注意的是, ChatGPT 有 88.9% 的回答「包含至少一個重要見解」,即見解較新穎獨到,在臨床上會有效果但不是人人能看得出來。ChatGPT 的分數甚至擊敗了 PubMedGPT,一個專門針對醫學文獻的人工智能聊天機械人。 PubMedGPT 的分數僅有 50.3%。

 

雖然 ChatGPT 表現超乎預期,但就現階段而言,在可見的未來它都不能取代醫學專家。研究人員表示,ChatGPT 於未經人為強化訓練的前提下,在 USMLE 取得及格分數,顯示這類大型語言模型有潛力協助醫學教育,和為臨床決策提供建議。

 

資料來源:Science Alert

Published by
Oscar