作者zkow (逍遙山水憶秋年)
看板AfterPhD
標題[新聞] 獨/台灣首篇AI考試論文發表 ChatGPT挑戰
時間Fri Jun 2 12:46:54 2023
獨/台灣首篇AI考試論文發表 ChatGPT挑戰國考來勢洶洶
2023-06-02 12:27
聯合報/ 記者巫鴻瑋/新竹即時報導
ChatGPT從去年底竄紅風靡全球以來,讓不少學者都擔心將徹底改變教育,尤其國外已傳
出ChatGPT 已可通過美國醫師與律師執照考試,未來是否考試意義不在成為話題,不過台
北榮總新竹分院教學研究中心近期即發表台灣第一篇AI應考論文,用ChatGPT參與國家執
照考試,結果顯示出乎意料。
由北榮新竹分院教學研究中心主任王瑛玫所著的「台灣藥師執照考試中ChatGPT的表現」
原著論文結果顯示,目前GPT 3.5版本的人工智慧能力還不足以通過國內藥師執照考試,
但成績已接近及格邊緣,表現已令人驚艷,但進一步研究卻發現GPT-4版本表現已勝過一
般考生,未來的教育模式與考試形態恐將改變。
在論文研究中,作者採用今年2月考試院舉行的專門職業及技術人員高等考試藥師考試,
共6個科目,第一階段的基礎藥學與第二階段的臨床藥學各3科,在國考資格中,通過二階
段考試就可以取得藥師執照。
研究先以中文測試,ChatGPT只通過1科,但將考題翻譯為英文後測試,ChatGPT可通過3科
,同時通過第二階段的考試,實力不容小覷。
依據王瑛玫研究分析,ChatGPT以中文作答時,第一階段與第二階段正確率是54.4%與
53.8%,但以英文作答時,第一階段與第二階段正確率就提高到56.9%與67.6 %,結果顯示
ChatGPT的英文答題能力大於中文,尤其在第二階段的臨床藥學科目,正確率可達7成以上
,不過其中有些科目包含藥物化學式、藥物動力學公式,因為圖片檔,GPT 3.5版本仍無
法辨識作答。
不過研究後續以GPT-4進行測試研究,發現答題正確率已經超過7成,人工智慧的考試成績
竟大幅贏過多數考生的成績,王瑛玫即指出雖然目前ChatGPT仍無法通過國家執照考試,
但透過深度學習不斷進步,未來將很快就會突破。
王瑛玫建議相關從業人員,尤其藥師養成教育應該隨人工智慧改變,醫事人員養成教育應
該加強運用AI科技自我學習的能力,更重要的是培養與病人互動溝通的能力,成為有溫度
的醫事人員,否則未來仍有可能被人工智慧取代。
目前該篇論文「台灣藥師執照考試中ChatGPT的表現」已正式發表於中華醫學雜誌(
Journal of the Chinese Medical Association),並同步登錄於全球權威醫學論文資料
庫PubMed中。
https://udn.com/news/story/6885/7208025?from=udn-ch1_breaknews-1-0-news
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.112.87.160 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/AfterPhD/M.1685681216.A.1BA.html