AI学習支援は利用中の正答率だけで評価してはいけない

従業員研修にChatGPTを導入すると、短期的には成績が上がる。PNASに掲載された研究では、一般的なChatGPT（完成解答型）を使った生徒は、練習得点が48％も向上した。経営層が見るのはこの数字だ。だが、AIなしで改めてテストすると、同じ生徒は対照群より17％低い得点になった。つまり、AI利用中の成績向上は、実力の向上ではなく「AIに頼る癖」であり、AIを外すと元より悪化している。

なぜこんなことが起きるのか。答えは単純だ。完成解答を返すAIは、学習者の「試行」を奪う。問題を解く工程は、不明点の特定→関連知識の想起→解法選択→計算→誤り検出→説明、という多段階だ。完成解答はこのうち2〜5を短縮できる。課題を速く完了できるという点では価値がある。しかし技能を習得する工程では、この「短縮」が学習者の試行回数を減らしてしまう。対照的に、同じGPT-4でも「ヒント型」（答えを直接返さず、ヒントを返す）にすると、悪影響がほぼ消えた。研究では教師が問題ごとに「正解」「典型的な誤り」「ヒント方法」を事前準備していた。これが「どの認知作業を学習者に残すか」という学習設計になっていたわけだ。

中小企業が新入社員や営業職にAI学習ツールを導入する場合、この知見は直結する。「AIが回答をくれるから研修効率が上がる」という見た目の指標だけで導入を決めると、実力として何も残らない人材が量産される。特に営業スキルやトラブル対応といった「現場で判断が必要な領域」では危険だ。ヒント型でも導入コストは上がるが、3ヶ月後の実力テストで「本当に力が付いたか」を測ってから継続判断する。その一手が、AI研修の本当の価値を決める。