ADVERTISING

「ChatGPT」で歯科医師国家試験に合格できるのか?

「ChatGPT」で歯科医師国家試験に合格できるのか?

Webテクノロジーに関する話題を発信するニュースサイト
Techable

OpenAIが2023年3月14日(米国時間)に発表した最新AI言語モデル「GPT-4」が、話題をさらっています。この新たなバージョンは、ChatGPTに搭載されており、従来モデルのGPT-3.5と比較して回答の正確性、安全性、入力の自由度が大幅に向上しています。

ADVERTISING

通院不要の歯科矯正サービスを展開する株式会社Oh my teethは、GPT-4搭載のChatGPTを活用して、歯科医師国家試験の必修問題を解くという取り組みを早速実施。GPT-3.5とGPT-4、それぞれの正答率を検証しました。

はたして、どんな結果となったのでしょうか?株式会社Oh my teethの代表取締役CEOである西野誠氏に検証の内容を詳しく寄稿していただきました。

ChatGPTが日本の歯科医師国家試験に合格できるか検証

今回Oh my teeth社は、2023年3月16日に合格発表のあった「第116回歯科医師国家試験」の必修問題を使って、ChatGPTの実力を試すことにしました。全80問で、合格ラインは正答率80%(67問以上正解)です。

まず、GPT-3.5に試験を受けてもらいました。基本的に問題をそのままコピペし、10問ごとに分割して実施。冒頭に「あなたは、東京医科歯科大学歯学部の首席レベルの優秀な学生です。」と書き、ロール(役割)を明確にしておきました。

すると、このようにGPT-3.5が猛烈スピードで回答してくれました。

回答は集計用のスプレッドシートに転記していきます(頭のよい人に回答済みの問題集を借りて、答えを丸写ししていた高校時代を思い出します…)。

次に、モデルをGPT-4に変更して実施しました。

なお、別冊のレントゲン写真が必要な設問では、質問文の最後に画像URLを貼り付けて対応しました。

実際に画像データを確認しているかはさておき、GPT-4の回答精度はGPT-3.5よりも高い印象でした。

ChatGPTの合格判定は?

GPT-3.5・GPT-4、それぞれの合格判定を発表します。

※回答精度にばらつきがあるため、参考程度にしてください。事実、再度同じプロンプトを送信した際に異なる回答が出力されることがありました。

GPT-3.5:遠く及ばず

従来のChatGPT(GPT-3.5)の正答率は58%でした。合格ラインには届かず不合格ですが、ランダムに回答すると20%程度の正答率になることを考慮すれば、それを大きく上回る性能があると言えます。

| GPT-3.5 |

| --- | --- |

| 正答数 | 46 |

| 問題数 | 80 |

| 正答率 | 58% |

| 合格基準 | 80% |

| 判定 | 不合格 |

GPT-4:合格ラインを突破

一方、最新モデルのGPT-4を搭載したChatGPTは正答率80%で、合格ラインを突破しました。ただし、受験者の平均正答率は81.4%(麻布デンタルアカデミー「第116回歯科医師国家試験 採点サービス」より)なので、特別優秀な成績ではありません。

| GPT-4 |

| --- | --- |

| 正答数 | 64 |

| 問題数 | 80 |

| 正答率 | 80% |

| 合格基準 | 80% |

| 判定 | 合格 |

過去に模擬試験の仕事に関わった歯科医師に、ChatGPTが誤答した設問リストを見てもらったところ、「簡単な問題を普通に間違えている」との指摘がありました。

英語ではGPT-4が司法試験に上位10%のスコアで合格できると報告されていますが、日本語ではまだ改善の余地があるようです。それでも、GPT-3.5と比べて性能の進化は明確です。

今後の展望

AI技術が今後さらに進化すれば、歯科医師のスキル向上や診療効率の改善につながり、最終的には歯科治療体験の向上に貢献できるでしょう。

例えば、歯科医師はAIを活用して効率的かつ的確な学習を進め、高度な診断や治療が可能になります。

さらに、最適な治療法を提案することも期待できます。歯科医師の学習だけでなく、一般の人々が歯の健康について学ぶための教育分野でも、AIが活用される可能性があります。

オーラルテックスタートアップ「Oh my teeth」でもこれらのテクノロジーを積極的に取り入れて、ユーザー中心の未来の歯科体験を生み出していきます。少しでもご興味持ってくださった方は、ぜひお気軽にご連絡ください。

<著者プロフィール>

西野誠
株式会社Oh my teeth
代表取締役CEO

1994年生まれ。大学在学中に物流スタートアップ「オープンロジ」にて創業期を経験。新卒でワークスアプリケーションズに入社。2019年10月、株式会社Oh my teethを共同創業。代表取締役CEOに就任。ファーストプロダクトである通院不要の歯科矯正「Oh my teeth」は利用者1万人を突破(2022年12月時点)。Onlab 21th「DemoDay」最優秀賞。ICC FUKUOKA 2022「D2C&サブスク カタパルト」優勝。

Twitter:https://twitter.com/mktnjp
note:https://note.com/mktnjp

ADVERTISING

JOB OPPOTUNITIES

最新の求人情報(求人一覧

求人

ラグジュアリー業界マネジメントスキル向上セミナー

GUCCI

ラグジュアリー業界マネジメントスキル向上セミナー

詳細を見る

ジャーナル

【7月23日(火)】GUCCI主催!ラグジュアリー業界マネジメントスキル向上セミナーのお知らせ

【7月23日(火)】GUCCI主催!ラグジュアリー業界マネジメントスキル向上セミナーのお知らせ

記事を読む

求人

【NEW ERA OSAKA】ストアスタッフ

New Era

【NEW ERA OSAKA】ストアスタッフ

年収

300万 〜

詳細を見る

ジャーナル

外資系ラグジュアリーブランドのMD職の仕事とは?求められるスキル&マインドについても解説

外資系ラグジュアリーブランドのMD職の仕事とは?求められるスキル&マインドについても解説

記事を読む

ジャーナル

人としての成長とスキルアップの両方を支える!業績好調な「ルルレモン」の企業カルチャーに迫る

人としての成長とスキルアップの両方を支える!業績好調な「ルルレモン」の企業カルチャーに迫る

記事を読む

ジャーナル

【イベントレポート】佐野 明政さんが手がけた3つのコラボ事例から紐解く。「ビームス流ココロを動...

【イベントレポート】佐野 明政さんが手がけた3つのコラボ事例から紐解く。「ビームス流ココロを動...

記事を読む

コラボパートナーの募集情報
コラボ募集一覧

コラボ

”水辺の宿場町”をデザインコンセプトとするアートホテル「東京ベイ潮見...

東京ベイ潮見プリンスホテル ”水辺の宿場町”をデザインコンセプトとするアートホテル「東京ベイ潮見...

詳細を見る

コラボ

自然素材をアップサイクルしたサステナブルなシューズブランド「Liberato(...

Liberato 自然素材をアップサイクルしたサステナブルなシューズブランド「Liberato(...

詳細を見る

コラボ

ドイツ腕時計ブランドの"ZEPPELIN"とのコラボレーションウォッチパートナ...

ZEPPELIN ドイツ腕時計ブランドの"ZEPPELIN"とのコラボレーションウォッチパートナ...

詳細を見る

コラボ

自治体の枠にとらわれない幅広いコラボ実績をもつ「サガプライズ!」とのコラボレーシ...

サガプライズ! 自治体の枠にとらわれない幅広いコラボ実績をもつ「サガプライズ!」とのコラボレーシ...

詳細を見る

Powered by

FIND THE NEXT

次の記事を探す

現在の人気記事

NEWS LETTERニュースレター

人気のお買いモノ記事

公式SNSアカウント