- Authors

- Name
- Youngju Kim
- @fjvbn20031
- はじめに — 答えがタダになった世界で
- 実力を作るのは検索ではなく想起である
- 望ましい困難、そして望ましくない困難
- AI 時代の罠 — 想起を外注するとき
- 何を深く、何を浅く — 半減期で分ける
- 実践 — まず試し、それから確認する
- 正直な限界
- おわりに
- 参考資料
はじめに — 答えがタダになった世界で
疑問が 3 秒で解決する時代に、それでも頭に入れておくべきものは何でしょうか。
いちばん単純な答え、つまり「AI が知らないことだけ」は役に立ちません。AI はほとんど知っているからです。そこで本稿は別の軸を使います。深く学ぶべきものは「AI が知らないこと」ではなく、「AI が間違えたときに自分が気づかなければならないこと」で決まります。
先の記事 AI は本当に開発者を速くするのか では「今日の自分は速くなったか」を問いました。本稿はもっと時間軸の長い問いです — 自分は上手くなっているのか。 そして学習科学がこの問いに返す答えは、AI ツールを毎日使う人にとって愉快ではありません。
実力を作るのは検索ではなく想起である
まず実験から。Roediger と Karpicke の 2006 年の論文(Psychological Science 17 巻 3 号)です。
ワシントン大学の学部生が短い科学の文章を学習します。実験 2 の条件は三つでした。
- SSSS — 文章を 4 回読む。テストなし。
- SSST — 3 回読み、1 回だけ想起テストを受ける。
- STTT — 1 回だけ読み、3 回の想起テストを受ける。フィードバックはなし。
5 分後に最終テストを行うと、結果は常識どおりです。SSSS が 83%、SSST が 78%、STTT が 71%。たくさん読んだほうが勝ちます。
ところが一週間後、順位は完全に反転します。 STTT が 61%、SSST が 56%、そして 4 回きっちり読んだ SSSS は 40% まで沈みます。いちばん印象的なのは露出量です。SSSS 群は文章を平均 14.2 回 通読しました。STTT 群はわずか 3.4 回 です。4 倍以上読んで、一週間後に 21 パーセントポイント多く忘れていました。一週間の忘却率で見れば、SSSS は 52% を失い、STTT は 14% しか失っていません。
そしてこの論文の本当の爆弾は、学習直後のアンケート(Table 2)にあります。「一週間後にこの文章をどれくらい覚えていると思うか」を 7 点尺度で聞いた結果です。
- SSSS: 4.8
- SSST: 4.2
- STTT: 4.0
いちばん自信のあった群が、いちばん覚えていませんでした。 著者の表現では、繰り返し読むことは "repeated studying inflated students' confidence" — 学生の自信を膨らませただけでした。そして論文の結論はこうです。"Testing is a powerful means of improving learning, not just assessing it."
用語を整理しておきます。想起(retrieval) は自分の頭から自力で引き出す行為です。参照(lookup) は誰かに引き出してもらう行為です。記憶を作るのは前者です。後者が作るのは、記憶を作った ような感じ だけです。
望ましい困難、そして望ましくない困難
なぜこうなるのかは、Bjork 夫妻の 2011 年の論考 "Making Things Hard on Yourself, But in a Good Way" が説明します。
核心は 学習(learning)と遂行(performance)の分離 です。遂行は訓練中に観察・測定できるもの、学習は残る変化のことです。彼らの言葉では "current performance can be a highly unreliable index of whether learning has occurred" — 今の遂行は、学習が起きたかどうかの指標としてきわめて当てにならない、ということです。
だから逆説が生まれます。遂行を速く引き上げる条件と、学習を残す条件は違います。 再読は流暢さ(perceptual fluency)を生み、私たちはその流暢さを理解と取り違えます。Bjork の理論用語で言えば 想起強度(retrieval strength)を貯蔵強度(storage strength)と誤読する のであり、その結果、私たちは自ら劣った学習条件を好むようになります。
そこで Bjork は、あえて難しくする条件を 望ましい困難(desirable difficulties) と呼びます。彼が挙げるのは、学習条件を変えること、話題をインターリーブすること(まとめずに混ぜる)、分散学習、そして 提示ではなくテストを学習イベントとして使うこと です。Bjork 研究室はここに 生成(generation) を加えます — 読む代わりに自分で作り出すこと。この効果の出発点は Slamecka と Graf の 1978 年の研究です。
数字も一つ。Bjork が引く Rohrer と Taylor(2007)の実験では、問題を混ぜて解いた群は一週間後に新しい問題の 63% を正解し、種類ごとにまとめて解いた群は 20% でした。ただし訓練中は、まとめて解いた側のほうが上手く見えました。いつもそうです。
ここで本稿全体を支える但し書きを付けなければなりません。 Bjork 自身が強く警告しています — "Many difficulties are undesirable during instruction and forever after."。すべての困難が良いわけではありません。困難が望ましくなるには、学習者がそれに うまく応えられるだけの背景知識 を持っている必要があります。それがなければ、単なる望ましくない困難、つまり浪費です。これを覚えておいてください — 少し後で、これが「いつ AI に任せてよいか」の基準になります。
AI 時代の罠 — 想起を外注するとき
問題は一文に縮められます。
実力を作るのは想起であり、AI は想起マシンです。 モデルに代わりに引き出させれば、専門性を作るまさにその行為を飛ばすことになります。この道具は、よりによってあなたが人任せにしてはいけない仕事をいちばん得意としています。そしてこれは類推ではなく、測定された結果です。
Bastani ら(PNAS, 2025)。 トルコの高校生およそ 1,000 名を対象とした現場実験です。三つの群 — GPT Base(通常の ChatGPT 風インターフェース)、GPT Tutor(答えを与えず教師が設計したヒントを出すよう安全装置をかけたもの)、そして AI なしの対照群。
- 練習中は AI が圧勝します。成績は GPT Base で 48%、GPT Tutor で 127% 向上しました。
- ところが AI を取り上げ、一人で試験を受けさせると、GPT Base 群は AI に一度も触れなかった対照群より 17% 低い 点数でした。
- 安全装置つきの GPT Tutor はこの害をおおむね消しました。ただし注意してください — 消しただけで、対照群を上回りはしませんでした。 練習中の 127% は試験会場までついてきませんでした。
著者の診断は一語です。学生たちは GPT-4 を "crutch"(松葉杖)として使った、と。これは Bjork が予測した学習と遂行の乖離が、実験室の外でそのまま再現された場面です。練習中の遂行は跳ね上がり、学習は残りませんでした。
Lee ら(CHI 2025、Microsoft Research と CMU)。 知識労働者 319 名 から、実務における生成 AI の利用事例 936 件 を集めて分析しました。核心は信頼の向きです — "higher confidence in GenAI is associated with less critical thinking"。AI を信頼するほど批判的思考は減り、自分自身 を信頼するほど批判的思考は増えました。さらに著者らは、AI を使うと批判的思考の性格そのものが、答えを生み出すことから、検証し・統合し・監督することへ移ると報告しています。
この論文は Bainbridge の古典的な「自動化の皮肉」も呼び出します — 日常的な作業を機械に渡すと、例外に対処する筋力を鍛える機会も一緒に失われる、というものです。そして例外はいつか来ます。
両研究の限界は先に書いておきます。 Bastani が扱ったのは高校生と数学であり、シニアエンジニアではありません。Lee らは 自己報告のアンケート であり相関です — タイトルからして "Self-Reported" と書いてあります。そして 先の記事 で見たとおり、AI が自分の成果に与えた影響についての自己報告は、私たちが持つ道具の中で最も信用ならないものです。メカニズムはもっともらしく転移しますが、効果量はそのままは移りません。
何を深く、何を浅く — 半減期で分ける
戦略は読書リストではなく 配分 です。あなたの「望ましい困難」の予算は有限で、それをどこに使うかがすべてです。基準は二つ — 半減期 と、間違いに気づけるかどうか。
長い半減期 — 自力で、深く、想起で。 これらは なぜ を説明し、数十年もちます。
- オペレーティングシステム — プロセス、メモリ、ファイルディスクリプタ、スケジューリング
- ネットワーク — TCP、TLS、HTTP セマンティクス、タイムアウトとリトライ
- データベース — トランザクション、分離レベル、インデックス、クエリプラン
- 分散システム — 一貫性、分断、冪等性、障害モード
- デバッグの方法論 — 仮説を立て、観測し、二分探索する
- データ構造とアルゴリズム — 暗記ではなく コストを推論できる水準 で
- 書くこと — 考えを検証可能な形にする技術
TCP は、あなたが学んだあらゆるフレームワークより長生きしました。そしてこれらこそが、モデルの出力を裁くときに取り出す道具です。
短い半減期 — 流し読みし、AI に運ばせる。 フレームワークの API、文法の些事、設定の呪文、CLI のフラグ、YAML のスキーマ。これらが AI の領分である理由は三つです。文書が豊富でモデルが得意なこと、検証が数秒で終わること(動くか動かないか)、そして どうせ古びること。ここに深く投資するのは、減価償却資産に投資するようなものです。
二つを分ける試験は一つだけです。モデルが間違えたとき、あなたは気づけるか。
- 誤った CLI フラグは自ら名乗り出ます。コマンドが失敗するからです。→ 流してよい。
- 微妙に誤った分離レベル、抜けた冪等キー、リトライ経路に潜む競合状態は、誰も名乗り出てくれません。 請求書は数か月後に届きます。→ これは自分で持つしかありません。
AI の代表的な失敗様式は「ほぼ正しいが完全には正しくない」です。そしてその「ほぼ」を捕まえられるのは、なぜ を知っている人だけです。習熟度と検証コストでタスクを分ける格子は 先の記事 にまとめてあります。
実践 — まず試し、それから確認する
処方箋は「AI を使うな」ではありません。順番を変えること です。想起の試みを、参照の 前 に置いてください。
根拠は Kornell、Hays、Bjork の 2009 年の論文(JEP: LMC 35 巻 4 号)で、その設計はほとんど残酷です。研究者たちは試みが 必ず失敗するように 材料を作りました。存在しない一般常識問題(「Calumet 戦争を終わらせた平和条約は?」— そんな戦争はありません)と、正解できた稀な試行は分析から除外した単語連想課題です。
- テスト条件 — まず答えを試み、それから正解を見る。(試みは 100% 失敗します。)
- 読むだけ条件 — 問題と正解を一緒に見る。
結果はこうです。"Unsuccessful retrieval attempts enhanced learning with both types of materials."。失敗した試みですら、いきなり正解を見るより良かった のです。著者の結論は、誤りを避けるのではなく難しいテストを受けることこそが効果的な学習の鍵かもしれない、というものです。これが処方箋のすべてです。実践に落とすと五つ。
1. プロンプトの前に 5 分、自分の答えを書く。 「このバグはコネクションプールの枯渇だろう」「このクエリはインデックスに乗らないだろう」。外れて構いません。Kornell の結果が言うのは、外れた試みこそが正解を頭に据え付ける ということです。
2. AI を自動補完ではなく批評家として使う。 「これ書いて」ではなく「私の設計はこうだ。どこで壊れる?」。同じ道具、正反対の認知的位置です。生成は自分に残り、反証をモデルに任せます。
3. 説明を求められる側になる。 いまマージしたコードで自分にクイズを出すよう頼んでみてください。自分の実際のコードベースの上でやる想起練習です。
4. 半減期の長い領域では、意図的に道具を切る。 禁欲ではなく訓練です。Bastani の実験は、まさに「道具が消えたとき何が起きるか」の測定でした。道具はいつか消えます — 深夜 3 時の障害、隔離されたネットワーク、あるいは単にモデルが自信満々に間違える問題の前で。
5. 半減期の短い領域では、罪悪感なく使う。 半減期で分ける理由がこれです。CLI のフラグを思い出そうと唸るのは、Bjork の言う 望ましくない困難 そのものです。何も積み上がりません。
同じ方向を指すプレプリントもあります("Struggle First, Prompt Later", arXiv 2025)。まず試してから AI を使う方式が、特に複雑で高次の課題で効果的だったという報告です。ただし 査読を経ておらず、標本サイズを確認できませんでした。 根拠ではなく道標として受け取ってください。
正直な限界
主張が過大に読まれないよう、弱点を自分で書いておきます。
実験室から実務への転移は類推です。 Roediger と Karpicke が測ったのは、学部生が散文を一週間覚えている課題です。Bjork の困難群は、主に単語リスト、運動課題、教室の教材で確立されました。そのどれも「エンジニアが 3 年かけて分散システムを身につけること」ではありません。方向はよく再現されていますが、あなたの職務における大きさは測られたことがありません。 割り引いて読んでください。
そして最も都合の悪い数字。 エリート選手のメンタル で扱ったとおり、エリクソンは「1 万時間の法則」という言葉を使ったことがなく — 彼の表現では "there is nothing special or magical about ten thousand hours" — Macnamara らの 2014 年のメタ分析は、意図的な練習が成果の分散をゲームで 26%、音楽で 21%、スポーツで 18%、教育で 4%、そして 職業領域では 1% 未満 しか説明しないと報告しました。よりによって、私たちに最も近い領域が最も弱いのです。著者らの結論もちょうどその通りです — 意図的な練習は重要だが、主張されてきたほどではない。この数字は私の論旨に不利です。だからこそ正確に書いておきます — 「意図的に練習せよ」という助言は職業領域では天井が低く、本稿はその天井の下でのみ有効です。
学ばないことが正しい場合もあります。 一生に一度しか触らない道具なら、まるごと AI に渡してください。それは怠惰ではなく、戦略が機能している姿です。
おわりに
一文に縮めるとこうです。AI は、あなたが代わりにやらせてしまえば決して上手くなれない、まさにその仕事を、驚くほど上手にやります。
これは禁欲せよという話ではありません。配分せよ という話です。あなたの望ましい困難の予算は有限です。半減期の長いもの、そして AI が間違えたときに必ず自分が捕まえなければならないものに使ってください。残りには一銭も使わないことです。付箋に書ける版は三行です。
- まず試し、それから確認する。
- 長持ちするものは自力で、すぐ古びるものは道具で。
- 「何を学んだか」ではなく「モデルが間違えたら気づけるか」を問う。
幸い、これらの習慣は小さい。プロンプトの前の 5 分、それだけです。小さいものがなぜ実際に定着するのかは 習慣は21日ではできない で扱いました。
最後に、この記事から一つだけ持ち帰るなら、Roediger の表を持ち帰ってください。文章を 14 回読み、自分を最も確信していた群が、一週間後に最も覚えていませんでした。流暢で、速く、確信に満ちていました。AI は毎日あなたをまさにその椅子に座らせます。理解した感じと理解という事実は分かれ、道具が消えたときに現れるのはそのうち一方だけです。
参考資料
- Roediger & Karpicke, "Test-Enhanced Learning: Taking Memory Tests Improves Long-Term Retention" (Psychological Science, 2006) — https://learninglab.psych.purdue.edu/downloads/2006/2006_Roediger_Karpicke_PsychSci.pdf
- Bjork & Bjork, "Making Things Hard on Yourself, But in a Good Way: Creating Desirable Difficulties to Enhance Learning" (2011) — https://bjorklab.psych.ucla.edu/wp-content/uploads/sites/13/2016/04/EBjork_RBjork_2011.pdf
- Bjork Learning and Forgetting Lab — 望ましい困難、貯蔵強度と想起強度 — https://bjorklab.psych.ucla.edu/research/
- Kornell, Hays & Bjork, "Unsuccessful Retrieval Attempts Enhance Subsequent Learning" (JEP: LMC, 2009) — https://web.williams.edu/Psychology/Faculty/Kornell/Publications/Kornell.Hays.Bjork.2009.pdf
- Bastani et al., "Generative AI Without Guardrails Can Harm Learning: Evidence from High School Mathematics" (PNAS, 2025) — https://www.pnas.org/doi/10.1073/pnas.2422633122
- 同論文の著者公開 PDF — https://hamsabastani.github.io/education_llm.pdf
- Lee et al., "The Impact of Generative AI on Critical Thinking" (CHI 2025, Microsoft Research と CMU) — https://www.microsoft.com/en-us/research/wp-content/uploads/2025/01/lee_2025_ai_critical_thinking_survey.pdf
- Macnamara, Hambrick & Oswald, "Deliberate Practice and Performance in Music, Games, Sports, Education, and Professions: A Meta-Analysis" (Psychological Science, 2014) — https://journals.sagepub.com/doi/abs/10.1177/0956797614535810
- Anders Ericsson — Malcolm Gladwell got us wrong (Salon, 2016) — https://www.salon.com/2016/04/10/malcolm_gladwell_got_us_wrong_our_research_was_key_to_the_10000_hour_rule_but_heres_what_got_oversimplified/
- "Struggle First, Prompt Later" (arXiv:2504.10249 — プレプリント、査読前) — https://arxiv.org/abs/2504.10249
- エリート選手のメンタル、ポスターを剥がして(関連記事)
- 習慣は21日ではできない(関連記事)
- AI は本当に開発者を速くするのか(関連記事)