ChatGPTと批判的思考訓練、学生の課題で異なる効果を発揮　OpenAIらの調査

大学の課題で学生に AI を自由に使わせたら、思考力は奪われるのか、それともプロ並みの成果を出せるようになるのか。

ボッコーニ大学の研究チームと OpenAI Economic Research が、1000 人以上の学部 1 年生を対象に共同で無作為化比較実験を行いました。課題は、大学の公式ショップの売上を伸ばすための実践的なマーケティング戦略の立案です。

学生たちは 4 つのグループに無作為に分けられました。ChatGPT（GPT-4o）を使えるグループ、因果推論のトレーニングを受けるグループ、その両方を受けるグループ、そしてどちらも与えられない対照群です。因果推論トレーニングは AI とは無関係に、ゲームやフィードバックを通じて原因と結果を論理的に結びつける力を鍛える内容でした。

提出物は人間の採点者が 5 段階評価基準で採点し、さらにテキスト分析を用いてアイデアの多様性や専門家の回答との類似度を測定しました。

仕上げる AI、発想を広げる批判的思考

実験の結果、AI と思考トレーニングはまったく異なる役割を果たすことがわかりました。

ChatGPT を使った学生は、5 段階評価で平均して約 1 点近く高いスコアを獲得しました。回答にはより多くのアイデアが盛り込まれ、論理構成が整い、専門家が書いた提案に極めて近い完成度になっていました。AI が初心者のアウトプットを底上げし、プロらしい体裁に整える役割をきれいに果たした形です。

一方で、アイデアの独自性を高めたのは因果推論のトレーニングでした。

この訓練を受けた学生は、なぜその施策が有効なのか、どのような条件下で失敗するのかを深く掘り下げて説明できるようになり、周囲と被らないユニークなアイデアを多く出しました。しかし興味深いことに、従来の採点基準ではこの独自性は高得点に結びつきませんでした。採点基準自体が、認知度向上といった標準的な目標を満たしているかだけを評価していたためです。

そして、ChatGPT と思考トレーニングの両方を与えられたグループが、最も優れた成果を出しました。洗練された構成と専門家並みの説得力を保ちながら、多様で鋭いアイデアを盛り込むことに成功しています。

なぜ重要か

この研究は、「AI を使わせるべきか、自分で考えさせるべきか」という教育現場の二者択一の議論に明確な答えを出しています。

学習者にとって、ChatGPT は思考をアウトプットへ落とし込む強力な相棒になりますが、前提を疑い、原因と結果を突き詰める思考力そのものを代行してくれるわけではありません。AI 頼みでは綺麗で退屈な正解しか出せず、独自の視点を生み出すには人間の批判的思考が不可欠です。

同時に、学校や企業の人材評価に対する課題も浮き彫りになりました。従来の評価基準は、論理的で破綻のない美しい文章を高く評価しがちですが、それはまさに LLM が最も得意とする領域です。

完成品の綺麗さだけで評価していては、本人が理解しているのか AI が整えただけなのか見分けがつきません。今後は「何を最終提出したか」だけでなく、どう問いを立て、前提をどう検証したかという思考のプロセスそのものを評価する仕組みへの転換が急務になると考えられます。