「AIで理学療法学生の臨床推論が伸びた」は本当か：AI支援PBLのRCTを批判的に読む

結論　この研究が比べたのは、教員の監督つきで構造化された ChatGPT 支援 PBL と、従来の PBL です。AI 群では2週間後の理論知識と、AI を使うことへの自信（AI 自己効力感）に有望な結果が出ました。一方、臨床能力（Mini-CEX）の群間差は有意ではありません。つまり、「AI が理学療法士の臨床推論を高めることが実証された」とまでは言えません。

この研究が実際に調べたこと

• 対象：理学療法学科の学生40名を無作為に分け、最終的に解析したのは AI-PBL 群19名、従来 PBL 群16名と報告
• テーマ：慢性腰痛（CLBP）の評価と管理
• 期間：2週間、合計8時間
• 両群に共通：講義、実技のデモ、教材
• AI-PBL 群：ChatGPT-4.0 の使い方と批判的な読み方のオリエンテーション、4〜5名の小グループで症例づくり・仮説の整理・評価と管理の計画、教員による正確さの確認とフィードバック
• 従来 PBL 群：同じ症例を使った、教員主導の討議と実技
• 主な評価：自作の20問の知識テスト、Mini-CEX
• 副次的な評価：AI 自己効力感、読書への動機、インターネット依存

読むときの境界線　これは「AI だけ」の効果ではなく、AI の使い方の研修＋構造化されたプロンプト＋小グループ学習＋くり返しの対話＋教員のフィードバックをまとめた教育パッケージの効果です。実際の患者さんの診断や治療成績を調べた研究でもありません。

結果を一つずつ確かめる

主張	本文で確認できた結果	判定
AI-PBL で知識が保たれた	2週時点の知識得点は AI 群81.8、対照群69.4（p=0.003、d=1.08）。AI 群の直後→2週の群内効果量は d=3.14	有望。ただし下のベースラインの差とテストのくり返しに注意
AI-PBL で臨床推論・臨床能力が上がった	Mini-CEX は AI 群が数値上は高いが、群間差は有意でない（p=0.236、d=0.42）。Mini-CEX は介入後の1回だけ	実証とは言えない
AI 自己効力感が上がった	変化量は AI 群 +19.8、対照群 −3.9。群間差 p=0.00003、d=1.78	支持される。ただし開始時点から群の差がある
読書への動機が上がった	両群とも改善。群間差は有意でない（p=0.495、d=0.24）	AI ならではの効果は確認できない
インターネット依存を悪化させなかった	2週間で有意な群間差なし（p=0.771）	短期間・少人数なので「リスクがない」とは一般化できない

方法で気をつけたいところ

1. 主な結果の開始時点がそろっていない：知識と AI 自己効力感は、介入の前から群間で有意な差がありました。知識得点は AI 群が約57、対照群が約47で、2週時点の群間差とほぼ同じくらいです。介入後だけを比べると、効果を大きく見積もりやすくなります。
2. 「伸び方の差」がはっきりしない：著者の全体モデルでは、多くの結果で群×時間の交互作用が有意ではありません（p=0.088）。「AI 群のほうが時間とともによく伸びた」という中心の主張を、強くは支えていません。
3. 臨床能力の改善は確認できない：Mini-CEX には介入前の測定がなく、介入後の群間差も有意ではありません。
4. 知識テストは自作で、同じ20問を3回使用：内容の妥当性は専門家の確認だけで、信頼性などの報告が十分ではありません。くり返し解いたことによる慣れも否定できません。
5. AI だけの効果を取り出せない：AI 群には、オリエンテーション・くり返しの対話・症例づくり・情報の確認・教員のフィードバックが組み合わさっています。登録情報では群ごとに別の教員がついた記載もあり、教員の影響も残ります。
6. 脱落の記載が合わない：各群20名から AI 群19名・対照群16名を解析したとする一方、対照群は「2名が未完了」とされ、人数の計算が一致しません。はっきりした ITT 解析でもありません。
7. 追跡は2週間だけ：長く覚えているか、臨床実習や実際の患者さんでの判断、安全性、患者さんの結果は分かりません。
8. 事前登録の記載に疑問：論文は「研究の開始前に登録」としていますが、ClinicalTrials.gov では研究開始日が2025-05-14、最初の提出が2025-05-30、公開が2025-06-08です。少なくとも公開記録の上では、前向きの登録と合いません。
9. 記載のゆれ：対象の学年・実習経験・実施施設などの書き方にゆれがあり、再現性と一般化には慎重さが必要です。

人に伝えるときの言い方

言ってよいこと

• 構造化された AI-PBL は、理学療法学生の知識の学習と、AI を使う自信を支える可能性がある
• 効果が期待できるのは、AI に答えを丸投げする使い方ではなく、小グループで問い、AI の出力を科学的な資料と照らし合わせ、教員がフィードバックする設計
• AI は教員や臨床家の代わりではなく、症例の対話・仮説の整理・情報の確認をうながす学習の支えとして位置づける

避けたい言い方

• 「AI で臨床推論能力が有意に向上した」
• 「ChatGPT を使えば理学療法士の臨床能力が上がる」
• 「AI 教育には依存などのリスクがない」

おすすめの言い方

小規模な RCT では、教員の監督つきの ChatGPT 支援 PBL で、2週間後の理論知識と AI 自己効力感に有望な改善が示された。一方、Mini-CEX で測った臨床能力の群間差は有意ではなく、AI が臨床推論能力そのものを高めたと言い切るには、さらに研究が必要である。

論文を読む練習として

この論文は、タイトルや抄録だけで結論を決めず、本文・表・試験登録まで照らし合わせる練習にぴったりです。

1. タイトルから予想される結果を確認する
2. 「臨床推論」を実際に何で測ったかを確認する
3. 群間の差と、群の中の変化を分ける
4. ベースラインの差、脱落、追跡期間を確認する
5. DOI・PMID・試験登録を照らし合わせる
6. 人に伝える言い方を、結果が支える範囲まで弱める