獣医学

GPTの日本獣医師国家試験合格を東京大学が発表──性能と弱点の検証結果を整理

獣医学veterinary

STELLANEWS.LIFE(ステラニュース・ライフ)は、科学や技術、医薬品分野における最新の研究成果や発見を中立的な立場から紹介するメディアである。

今回の記事で伝える情報は次の通り。

要点
  • 【要点①】人工知能モデルGPT(Generative Pre-trained Transformer)が、日本獣医師国家試験において合格最低点を大幅に上回る成績を示した。
  • 【要点②】最新モデルであるo3は、日本語の試験問題原文を翻訳なしに解釈し、全体で92.9%の正答率を記録した。
  • 【要点③】国内法規に基づく法律問題や画像問題、臨床問題では正答率が低下する傾向が確認された。

概要

 東京大学大学院農学生命科学研究科の加藤大貴特任講師と中川貴之教授の研究グループは、対話型人工知能サービス「ChatGPT」に搭載される人工知能モデルGPT(Generative Pre-trained Transformer)について、日本獣医師国家試験における解答性能を検証したと発表した。ヒト医学分野では英語翻訳を介して合格点を上回る例が報告されていた一方、日本語で出題され特殊な知識を要する獣医学領域での性能は明らかでなかったという。今回の検証では、最新モデルが日本語原文のまま高い正答率を示す一方、特定の分野では正答率が低下することも判明した。研究グループは、獣医学教育や実務における補助的な活用に向けた基盤的な成果と位置づけている。

詳細
  • 発表元東京大学大学院農学生命科学研究科
  • 発表日2024年12月27日
  • 対象過去3年分の日本獣医師国家試験問題(必須問題、A〜D問題の全330問)
  • 検証内容複数のGPTモデルについて、入力プロンプトや言語翻訳の有無による解答性能への影響を比較した。
  • 主要結果最新のo3モデルは日本語原文のまま入力した場合、全セクションで合格基準(60〜70%)を上回り、全体で92.9%の正答率を示した。
  • 限界と今後の課題国内法規に関する問題や画像問題、臨床的な論理的思考を要する問題では正答率が低下しており、獣医師の業務を補助するツールとしての活用可能性と限界の両面が示された。

AIによるインパクト評価

評価(参考): ★★★☆☆

獣医学領域における人工知能活用の基盤的知見として意義があるものの、研究グループ自身が診断や治療の代替を想定したものではないと明示している点に留意する必要がある。

3言語要約 / Multilingual Summaries

English Summary

Note: This is an AI-assisted translation for reference.

  • University of Tokyo researchers tested GPT AI models on Japan’s national veterinary licensing exam.
  • The latest model, o3, correctly answered 92.9% of questions directly in Japanese without translation, far exceeding the passing threshold.
  • Accuracy dropped for questions involving domestic legal regulations, images, and clinical cases.


中文摘要

注:AI辅助生成。

  • 东京大学研究团队测试了GPT人工智能模型在日本兽医师国家考试中的表现。
  • 最新模型o3无需翻译即可直接理解日语原文,正确率高达92.9%,远超及格线。
  • 在涉及国内法规、图像及临床问题的题目中,正确率有所下降。


हिन्दी सारांश

AI द्वारा तैयार किया गया अनुवाद।

  • टोक्यो विश्वविद्यालय के शोधकर्ताओं ने जापान की पशु चिकित्सक राष्ट्रीय परीक्षा में GPT AI मॉडल का परीक्षण किया।
  • नवीनतम मॉडल o3 ने बिना अनुवाद के जापानी भाषा में सीधे 92.9% सही उत्तर दिए, जो उत्तीर्णांक से कहीं अधिक है।
  • घरेलू कानूनों, चित्र-आधारित और नैदानिक प्रश्नों में सटीकता में कमी देखी गई।


参考文献

ChatGPTに搭載される人工知能モデルGPTが日本獣医師国家試験に合格した!|東京大学大学院農学生命科学研究科・農学部
https://www.a.u-tokyo.ac.jp/topics/topics_20260216-1.html


最前線を3分で

医療・科学・バイオの必読ニュースを厳選してお届けします。
AI編集 × 専門編集で“要点だけ

プライバシーポリシーをご覧ください。

この記事の執筆者

ステラ・メディックス

コメントを投稿する

コメント投稿時に入力いただくメールアドレスは公開ページ上に表示されません。必要に応じてご連絡を差し上げる目的で利用する場合があります。個人情報の取扱いについてはプライバシーポリシーに基づき適切に管理します。

ARCHIVE

新着記事