ChatGPT 得分接近及格線,幾乎通過美國醫師執照考試

作者 | 發布日期 2023 年 02 月 15 日 8:00 | 分類 AI 人工智慧 , 醫療科技 line share follow us in feedly line share
ChatGPT 得分接近及格線,幾乎通過美國醫師執照考試


外媒報導,人工智慧聊天機器人 ChatGPT 最近幾乎通過美國醫師執照考試(US Medical Licensing Exam,USMLE),得分近 60% 準確率及格線。

眾所周知各國醫師執照考取率都不會太高,9 日美國期刊《PLOS Digital Health》發表研究報告,ChatGPT 報考美國醫師執照考試,挑戰 2022 年 6 月版 376 道試題的 350 道,成績接近及格線。研究人員更指 ChatGPT 能協助撰寫研究報告。

美國醫師執照考試由三次考試組成,涵蓋基礎科學到生物倫理等,需 300~400 小時準備時間。研究人員指出,ChatGPT 未經專門訓練或強化,三考試分別取得 52.4%~75% 準確率,近 60% 及格線。

ChatGPT 能說出回答背後理據,論述有高水準洞察力和一致性,且 ChatGPT 有 88.9% 回答「至少含一個重要見解」,即見解新穎獨到,臨床會有效果但不是人人看得出來。ChatGPT 分數甚至擊敗 PubMedGPT──專門醫學文獻 AI 聊天機器人,順道一提 PubMedGPT 準確率為 50.3%。

雖然 ChatGPT 表現超乎預期,但現階段而言還不能取代人類醫師。研究人員表示,ChatGPT 未經強化訓練就能取得 USMLE 及格分數,顯示這類大型語言模型有潛力協助醫學教育、提供臨床建議。

(本文由 Unwire HK 授權轉載;首圖來源:shutterstock)

延伸閱讀: