掲載済み (2026-08-29号)
021 204文字 • 2分

初心者に思考を教えるべきか、LLMを与えるべきか?ランダム化比較試験(RCT)からの証拠

原題: Training novices to think, or giving them LLMs? Evidence from an RCT

英語

掲載情報

概要

1,053名の大学生を対象としたRCTにより、ChatGPTはビジネス課題の評価スコアを劇的に向上させる一方で、因果推論の訓練はスコア向上には直結しないものの思考の多様性を高めることが判明しました。

詳細内容

本研究は、大学1年生1,053名を対象に、因果推論(論理的思考)の訓練とChatGPT(GPT-4o)の使用がビジネス課題の解決能力に与える影響を2×2のランダム化比較試験(RCT)で調査しました。結果として、ChatGPTの使用は評価スコアを大幅に向上させ、初心者の提案を専門家の推奨内容に近づける「技能補完」の効果を示しました。一方で、因果推論の訓練は、回答におけるメカニズムの特定やアイデアの多様性を向上させたものの、標準的な評価指標に基づくスコア向上には繋がりませんでした。これは、既存の評価システムが標準的な回答を好む傾向にあり、因果推論が生み出す「多様性」を正当に評価できていない可能性を示唆しています。重要な点として、人間はLLMが利用可能な環境でも習得した思考スキルを放棄せず活用し続けており、AI時代においても思考プロセスを教える価値が実証されています。結論として、AIは技能格差を埋める強力なツールとなりますが、真の独創性を引き出すには、多様性を重視した評価システムの再設計が必要であると提言しています。