作者zkow (逍遥山水忆秋年)
看板AfterPhD
标题[新闻] 独/台湾首篇AI考试论文发表 ChatGPT挑战
时间Fri Jun 2 12:46:54 2023
独/台湾首篇AI考试论文发表 ChatGPT挑战国考来势汹汹
2023-06-02 12:27
联合报/ 记者巫鸿玮/新竹即时报导
ChatGPT从去年底窜红风靡全球以来,让不少学者都担心将彻底改变教育,尤其国外已传
出ChatGPT 已可通过美国医师与律师执照考试,未来是否考试意义不在成为话题,不过台
北荣总新竹分院教学研究中心近期即发表台湾第一篇AI应考论文,用ChatGPT参与国家执
照考试,结果显示出乎意料。
由北荣新竹分院教学研究中心主任王瑛玫所着的「台湾药师执照考试中ChatGPT的表现」
原着论文结果显示,目前GPT 3.5版本的人工智慧能力还不足以通过国内药师执照考试,
但成绩已接近及格边缘,表现已令人惊艳,但进一步研究却发现GPT-4版本表现已胜过一
般考生,未来的教育模式与考试形态恐将改变。
在论文研究中,作者采用今年2月考试院举行的专门职业及技术人员高等考试药师考试,
共6个科目,第一阶段的基础药学与第二阶段的临床药学各3科,在国考资格中,通过二阶
段考试就可以取得药师执照。
研究先以中文测试,ChatGPT只通过1科,但将考题翻译为英文後测试,ChatGPT可通过3科
,同时通过第二阶段的考试,实力不容小觑。
依据王瑛玫研究分析,ChatGPT以中文作答时,第一阶段与第二阶段正确率是54.4%与
53.8%,但以英文作答时,第一阶段与第二阶段正确率就提高到56.9%与67.6 %,结果显示
ChatGPT的英文答题能力大於中文,尤其在第二阶段的临床药学科目,正确率可达7成以上
,不过其中有些科目包含药物化学式、药物动力学公式,因为图片档,GPT 3.5版本仍无
法辨识作答。
不过研究後续以GPT-4进行测试研究,发现答题正确率已经超过7成,人工智慧的考试成绩
竟大幅赢过多数考生的成绩,王瑛玫即指出虽然目前ChatGPT仍无法通过国家执照考试,
但透过深度学习不断进步,未来将很快就会突破。
王瑛玫建议相关从业人员,尤其药师养成教育应该随人工智慧改变,医事人员养成教育应
该加强运用AI科技自我学习的能力,更重要的是培养与病人互动沟通的能力,成为有温度
的医事人员,否则未来仍有可能被人工智慧取代。
目前该篇论文「台湾药师执照考试中ChatGPT的表现」已正式发表於中华医学杂志(
Journal of the Chinese Medical Association),并同步登录於全球权威医学论文资料
库PubMed中。
https://udn.com/news/story/6885/7208025?from=udn-ch1_breaknews-1-0-news
--
※ 发信站: 批踢踢实业坊(ptt.cc), 来自: 140.112.87.160 (台湾)
※ 文章网址: https://webptt.com/cn.aspx?n=bbs/AfterPhD/M.1685681216.A.1BA.html