Split View: 전문가가 되는 길: 피드백이 먼저이고 분량은 그다음이다
전문가가 되는 길: 피드백이 먼저이고 분량은 그다음이다
들어가며
앞의 네 글에서 정리한 것을 한 문단으로 줄이면 이렇습니다.
멀리 떨어진 영역으로 능력이 옮겨간다는 증거는 약합니다. 전문성은 지식의 양이 아니라 패턴 지각에 가깝고, 그 패턴은 영역에 붙어 있습니다. 연습에서 잘 검증된 것은 간격과 인출이고, 연습 중의 느낌은 학습의 지표가 되지 못합니다. 그리고 일반 능력이라는 개념으로 사람을 요약하려는 시도는 자료가 지지하지 않습니다.
이 글은 그것을 실행으로 옮깁니다. 다만 미리 말해두겠습니다. 아래 다섯 가지는 어느 것도 결과를 보장하지 않습니다. 보장한다고 말하는 조언은 이 분야에 존재하지 않습니다. 그리고 마지막 절에는 이 조언이 통하지 않는 경우를 적었는데, 그 절이 앞의 다섯 개보다 실용적일 수도 있습니다.
1. 피드백이 오는 범위로 영역을 좁힌다
Ericsson이 2020년에 자신의 원래 틀을 다시 설명하며 제시한 다섯 가지 기준 중 세 개가 피드백과 관련되어 있습니다. 목표가 분명한 잘 정의된 과제, 즉각적이고 유익하며 행동으로 옮길 수 있는 피드백, 같거나 비슷한 과제를 반복할 기회 (Ericsson, 2020, 2026-08-16 읽음).
여기서 영역 선택의 기준이 나옵니다. 어떤 영역이 배우기 좋은가는 재미나 전망이 아니라 피드백의 속도와 해상도로 판단할 수 있습니다.
이것이 왜 중요한지는 숫자로도 보입니다. Macnamara와 동료들의 2014년 메타분석에서 의도적 연습이 설명한 분산은 게임 26퍼센트, 음악 21퍼센트, 스포츠 18퍼센트였고, 교육은 4퍼센트, 직업 영역은 1퍼센트 미만이었습니다 (Macnamara 외, 2014, 2026-08-16 읽음).
이 순서를 보면 규칙성이 하나 보입니다. 위쪽에 있는 영역들은 결과가 즉시, 명확하게 나오는 영역입니다. 아래쪽은 결과가 늦게, 여러 요인에 섞여서 나오는 영역입니다. 연습의 효과가 큰 영역과 피드백이 좋은 영역이 겹칩니다.
실무에 적용하면 이렇게 됩니다. 기획을 잘하고 싶다는 목표는 피드백이 몇 달 뒤에 옵니다. 반면 회의에서 결정을 문서로 남기는 일은 다음 회의에서 확인됩니다. 후자부터 시작하는 편이 낫습니다. 목표가 작아지는 것이 아니라, 학습 가능한 크기로 잘리는 것입니다.
2. 분량보다 먼저 피드백 루프를 만든다
가장 흔한 실패 형태는 순서가 뒤집히는 것입니다. 먼저 많이 하고, 나중에 확인하겠다는 것.
Macnamara와 Maitra가 2019년 Royal Society Open Science에 발표한 재현 연구는 바이올린 전공생을 대상으로 원래의 1993년 연구를 다시 수행했습니다. 이중맹검 절차를 도입하고 통계 처리를 바꿨습니다 (Macnamara & Maitra, 2019, 2026-08-16 읽음).
누적 연습량과 실력 수준의 대응은 재현되었지만 효과 크기는 원래보다 상당히 작았습니다. 그리고 교사가 설계한 연습이 혼자 하는 연습을 넘어서는 추가 분산을 설명하지 못했다는 결과도 함께 보고되었습니다.
이 결과를 어느 방향으로도 과장하지 않는 것이 중요합니다. 연습이 무의미하다는 뜻이 아닙니다. 연습량이라는 단일 변수로 실력을 설명하려는 시도가 기대만큼 잘 안 된다는 뜻입니다.
그래서 실무적으로는 이렇게 뒤집는 편이 낫습니다. 이번 주에 몇 시간을 쓸지 정하기 전에, 이번 주에 무엇으로 잘했는지 못했는지를 알 것인지를 먼저 정합니다. 확인 방법이 없으면 시간을 늘리지 않습니다. 늘려도 값이 되지 않기 때문입니다.
3. 수행할 조건에서 연습한다
연습 조건과 실전 조건이 다르면, 연습에서 만든 것이 실전에서 나오지 않습니다.
이 원리를 가장 선명하게 보여주는 것이 맥락 간섭 메타분석의 조건별 결과입니다. Czyż와 동료들의 2024년 분석에서 전체 파지 효과는 표준화 평균차 0.63이었지만, 실험실 조건에서는 0.92, 현장 조건에서는 0.23으로 유의하지 않았습니다 (Czyż 외, 2024, 2026-08-16 읽음).
이 결과의 원래 의미는 맥락 간섭 효과의 일반화 가능성에 대한 경고입니다. 다만 여기서 함께 읽을 수 있는 것이 있습니다. 조건이 바뀌면 결과도 바뀐다는 것. 실험실에서 성립하던 것이 현장에서 성립하지 않았다면, 개인의 연습에서도 조건 차이는 같은 방식으로 작동할 가능성이 큽니다. 이것은 추론이지 이 논문의 결론이 아닙니다.
실무로 옮기면 이렇습니다. 발표를 잘하고 싶으면 앉아서 원고를 다듬는 대신 서서 시간을 재고 말해봐야 합니다. 회의 영어를 하고 싶으면 혼자 읽는 대신 사람 앞에서 말해봐야 합니다. 압박이 있는 상태에서 한 번도 해보지 않은 것은 압박 상태에서 나오지 않습니다.
탁구에서 배운 14가지에도 같은 항목이 있습니다. 경기에서 써 보지 않은 기술은 끝내 자기 것이 되지 않는다는 것. 경험에서 나온 문장과 자료에서 나온 문장이 같은 방향을 가리킵니다.
4. 즐거운 기술이 아니라 반복되는 오류를 찾는다
사람은 잘되는 것을 연습하는 쪽으로 기웁니다. 잘되니까 기분이 좋고, 기분이 좋으니까 더 합니다.
그런데 앞 글에서 본 것처럼, 학습자는 자기에게 무엇이 효과적이었는지를 정확히 판단하지 못합니다. Do와 Thomas의 2023년 연구에서 참가자들은 교차 연습의 이득을 보고도 그 이득을 인식하지 못했습니다 (Do & Thomas, 2023, 2026-08-16 읽음).
그렇다면 무엇을 연습할지는 느낌으로 정하면 안 됩니다. 기록으로 정해야 합니다.
구성한 예시로 방법을 적어보겠습니다. 한 주 동안 실패한 순간만 짧게 적습니다. 언제, 무엇이, 어떻게 안 됐는지. 주말에 그 목록을 보면 대체로 서너 개의 항목이 반복해서 나타납니다. 다음 주에 연습할 것은 그 반복되는 항목이지, 하고 싶은 항목이 아닙니다. 이것은 실제 사례가 아니라 절차를 설명하기 위해 구성한 예시입니다.
이 방법의 핵심은 목록이 아니라 반복이라는 기준입니다. 한 번 실패한 것은 상황일 수 있지만, 세 번 반복된 것은 구조입니다.
5. 정체기를 예상한다
정체기는 예외가 아니라 기본값에 가깝습니다.
가장 직접적인 자료는 스포츠 쪽에 있습니다. Macnamara, Moreau, Hambrick이 2016년 Perspectives on Psychological Science에 발표한 메타분석에서, 의도적 연습은 스포츠 수행 분산의 18퍼센트를 설명했습니다. 그런데 최상위 수준 선수들만 놓고 보면 그 값이 1퍼센트로 떨어졌습니다 (Macnamara 외, 2016, 2026-08-16 읽음).
같은 연구에서 또 하나가 나왔습니다. 높은 수준에 도달한 선수들이 낮은 수준의 선수들보다 더 어린 나이에 종목을 시작한 것은 아니었습니다.
이 두 결과를 실용적으로 읽으면 이렇습니다. 실력이 올라갈수록 연습량으로 설명되는 부분이 줄어듭니다. 처음에는 시간을 늘리면 늘던 것이, 어느 지점부터는 그렇지 않게 됩니다. 이것은 자기 관리 실패의 신호가 아니라 예상 가능한 지점입니다.
여기서 무엇을 해야 하는지에 대해서는 저는 검증된 답을 갖고 있지 않습니다. 흔히 하는 조언은 연습의 종류를 바꾸라는 것인데, 그 조언을 뒷받침하는 자료를 이번에 확인하지 못했습니다. 그래서 여기서는 예상하라는 것까지만 말하겠습니다. 예상하는 것과 대비하는 것은 다르지만, 예상하지 못한 정체기는 그만두게 만드는 반면 예상한 정체기는 그렇지 않습니다.
6. 마음가짐에 대해서는 조심스럽게
성장 마인드셋은 한국에서 가장 널리 인용되는 학습 심리 개념 중 하나입니다. 현재 상태를 정확히 적어두는 편이 낫습니다. 이 항목의 증거 등급은 논쟁 중입니다.
Sisk와 동료들이 2018년 Psychological Science에 발표한 두 개의 메타분석이 출발점입니다. 첫 번째는 마인드셋과 학업 성취의 관계를 273개 표본, 총 365,915명 규모로 검토했고, 두 번째는 개입의 효과를 43개 표본, 총 57,155명 규모로 검토했습니다. 저자들의 표현으로 두 메타분석 모두에서 전반적 효과는 약했습니다. 다만 사회경제적 지위가 낮거나 학업적으로 위험군에 속한 학생들에게는 이득이 있을 수 있다는 결과가 함께 보고되었습니다 (Sisk 외, 2018, 2026-08-16 읽음).
Macnamara와 Burgoyne이 2023년 Psychological Bulletin에 발표한 후속 메타분석은 더 강한 결론을 냈습니다. 63편의 연구, 총 97,672명을 대상으로 한 분석에서 전체 효과는 0.05였고, 출판 편향을 보정하면 유의하지 않게 되었습니다. 의도한 대로 학생들의 마인드셋을 실제로 바꾼 13편만 보면 0.04로 유의하지 않았고, 품질이 가장 높은 6편만 보면 0.02로 유의하지 않았습니다. 저자들은 성장 마인드셋 개입의 겉보기 효과가 부적절한 연구 설계와 보고 결함과 편향에 기인할 가능성이 크다고 결론지었습니다 (Macnamara & Burgoyne, 2023, 2026-08-16 읽음).
그런데 반대편 자료도 있습니다. Yeager와 동료들이 2019년 Nature에 발표한 전국 규모 실험은 미국 중등학교 학생들을 대상으로 한 시간 미만의 온라인 개입이 하위 성취 학생들의 성적을 개선했고 상급 수학 과목 등록을 늘렸다고 보고했습니다. 또래 규범이 개입의 메시지와 맞을 때 효과가 유지되었다는 조건도 함께 보고했습니다 (Yeager 외, 2019, 2026-08-16 읽음).
그리고 Tipton과 동료들이 2023년 Psychological Bulletin에 쓴 논평은 방법론 쪽에서 반박합니다. 이질성을 다루는 최신 다층 방법으로 Macnamara와 Burgoyne의 자료를 재분석했을 때 전체 0.09, 위험군 0.15가 나왔고, 이는 Burnette와 동료들이 보고한 값과 비슷했다는 것입니다 (Tipton 외, 2023, 2026-08-16 읽음).
이것이 현재 상태입니다. 2010년대의 열광도 정확하지 않고, 완전히 무너졌다는 반발도 정확하지 않습니다. 정확한 요약은 이렇습니다. 평균 효과는 작고, 특정 집단과 특정 조건에서 효과가 있는지가 논쟁의 초점이며, 방법론적 이견이 아직 해소되지 않았습니다.
실용적으로는 이렇게 읽으면 됩니다. 마음가짐을 바꾸는 것만으로 성취가 바뀐다는 기대는 근거가 약합니다. 반면 마음가짐을 다루는 것이 무의미하다고 말할 근거도 없습니다. 이 정도가 자료가 허용하는 범위입니다.
7. 주장별 증거 등급
| 주장 | 증거 등급 | 근거 |
|---|---|---|
| 피드백이 좋은 영역일수록 연습의 설명력이 크다 | 반복 검증됨 | Macnamara 외 2014의 영역별 수치 |
| 즉각적 피드백은 의도적 연습의 핵심 조건이다 | 이론 틀의 정의 | Ericsson 2020 |
| 연습량의 설명력은 원래 주장보다 작다 | 반복 검증됨 | Macnamara 외 2014, Macnamara & Maitra 2019 |
| 최상위 수준에서는 연습량 설명력이 급감한다 | 단일 메타분석 | Macnamara 외 2016 |
| 상위 선수가 더 일찍 시작한 것은 아니다 | 단일 메타분석 | Macnamara 외 2016 |
| 조건이 바뀌면 효과 크기가 크게 달라진다 | 반복 검증됨 | Czyż 외 2024 |
| 학습자는 효과적인 방법을 스스로 판단하지 못한다 | 반복 검증됨 | Do & Thomas 2023 |
| 성장 마인드셋 개입이 성취를 높인다 | 논쟁 중 | Sisk 외 2018, Macnamara & Burgoyne 2023, Yeager 외 2019, Tipton 외 2023 |
| 정체기에서 연습 종류를 바꾸면 뚫린다 | 자료 확보 실패 | 인용 없음 |
이 조언이 안 맞는 경우
여기가 이 글에서 가장 중요한 절입니다.
첫째, 피드백이 느리거나 없는 영역. 위의 조언은 전부 피드백을 전제합니다. 그런데 결과가 몇 년 뒤에 나오는 일이 있습니다. 조직 문화를 바꾸는 일, 장기 연구, 아이를 키우는 일. 이런 영역에서는 의도적 연습의 틀이 그대로 적용되지 않습니다. Macnamara와 동료들의 메타분석에서 직업 영역의 설명력이 1퍼센트 미만이었던 것도 같은 이유일 가능성이 큽니다. 이런 영역에서는 실력을 늘리는 문제보다 판단의 근거를 남기는 문제가 더 중요해집니다.
둘째, 접근권이 실력보다 결정적인 영역. 어떤 분야에서는 무엇을 할 수 있느냐보다 어디에 있느냐가 결과를 더 많이 좌우합니다. 기회의 분포가 균등하지 않은 곳에서 실력만 이야기하는 조언은 절반만 정직합니다. 이 시리즈의 어떤 자료도 접근권 문제를 다루지 않았고, 그것은 이 시리즈의 한계입니다.
셋째, 측정 가능한 것으로 목표가 미끄러지는 경우. 피드백이 빠른 것을 우선하라는 조언에는 부작용이 있습니다. 재기 쉬운 것만 하게 되는 것. 중요한 일 중에는 재기 어려운 것이 많고, 재기 쉬운 것만 쌓으면 총량은 늘어도 방향이 사라집니다.
넷째, 전문성이 목표가 아닌 경우. 이것이 가장 자주 잊히는 항목입니다. 취미를 훈련으로 바꾸는 순간 그 활동에서 얻던 것이 사라질 수 있습니다. 늘지 않아도 좋은 활동이 있습니다. 모든 활동을 개선의 대상으로 만드는 태도는 그 자체로 검증된 좋은 삶의 방식이 아닙니다.
다섯째, 지금 상태가 학습보다 회복을 필요로 하는 경우. 위의 조언들은 전부 여력이 있는 상태를 전제합니다. 소진된 상태에서 오류 목록을 만드는 것은 학습이 아니라 자기 비난이 되기 쉽습니다.
마치며
다섯 문장으로 줄이면 이렇습니다.
피드백이 오는 크기로 목표를 자릅니다. 시간을 늘리기 전에 확인 방법을 만듭니다. 실전 조건에서 해봅니다. 반복되는 오류를 다음 주 과제로 삼습니다. 정체기가 오는 것을 미리 압니다.
그리고 이 다섯 가지가 통하지 않는 자리를 알아두는 것이, 다섯 가지를 아는 것만큼 중요합니다. 자기 영역이 피드백이 느린 영역이라면 위의 조언 대부분은 그대로 적용되지 않습니다. 그것을 모르고 자기 탓을 하는 것이 이 분야 조언의 가장 흔한 부작용입니다.
마지막으로 한 가지. 이 시리즈에서 반복해서 확인한 것은 결국 하나입니다. 전문성은 좁습니다. 좁다는 것은 나쁜 소식처럼 들리지만, 실제로는 좋은 소식입니다. 좁은 것은 정할 수 있고, 정할 수 있는 것은 시작할 수 있기 때문입니다.
이어지는 글:
- 이전 글: 똑똑하다는 것의 정의 — 무엇이 측정되고 무엇이 측정되지 않는가.
- 시리즈 첫 글: 공부 잘하는 것과 운동 잘하는 것의 공통점은 생각보다 좁다
- 탁구에서 배운 14가지 — 같은 결론에 경험으로 도달한 글.
- 의식적 연습 경로 도구 — 약점 기반 연습 경로를 짜는 도구.
- 섀도잉 도구 — 실전 조건에서 소리 내어 반복하는 연습 도구.
참고 자료
아래는 이 글을 쓰면서 2026-08-16에 직접 확인한 자료입니다. 링크는 실제로 읽은 주소이며, 일부는 Europe PMC의 공개 API 응답입니다.
- Ericsson, K. A. (2020). A response to Macnamara and Hambrick (2020). Psychological Research
- Macnamara, B. N., Hambrick, D. Z., & Oswald, F. L. (2014). Deliberate Practice and Performance in Music, Games, Sports, Education, and Professions: A Meta-Analysis. Psychological Science
- Macnamara, B. N., & Maitra, M. (2019). The role of deliberate practice in expert performance: revisiting Ericsson, Krampe and Tesch-Römer (1993). Royal Society Open Science
- Macnamara, B. N., Moreau, D., & Hambrick, D. Z. (2016). The Relationship Between Deliberate Practice and Performance in Sports: A Meta-Analysis. Perspectives on Psychological Science
- Czyż, S. H., Wójcik, A. M., Solarská, P., & Kiper, P. (2024). High contextual interference improves retention in motor learning: systematic review and meta-analysis. Scientific Reports
- Do, L. A., & Thomas, A. K. (2023). The Underappreciated Benefits of Interleaving for Category Learning. Journal of Intelligence
- Sisk, V. F., Burgoyne, A. P., Sun, J., Butler, J. L., & Macnamara, B. N. (2018). To What Extent and Under Which Circumstances Are Growth Mind-Sets Important to Academic Achievement? Two Meta-Analyses. Psychological Science
- Macnamara, B. N., & Burgoyne, A. P. (2023). Do growth mindset interventions impact students academic achievement? A systematic review and meta-analysis. Psychological Bulletin
- Yeager, D. S., et al. (2019). A national experiment reveals where a growth mindset improves achievement. Nature
- Tipton, E., Bryan, C., Murray, J., McDaniel, M., Schneider, B., & Yeager, D. S. (2023). Why Meta-Analyses of Growth Mindset and Other Interventions Should Follow Best Practices for Examining Heterogeneity. Psychological Bulletin, 149(3-4), 229-241
The Road to Becoming an Expert: Feedback First, Volume Second
Introduction
Reduced to a single paragraph, what the previous four posts set out is this.
The evidence that ability moves across to a distant domain is weak. Expertise is closer to pattern perception than to a quantity of knowledge, and those patterns are attached to their domain. What has been well verified in practice is spacing and retrieval, and the feeling during practice cannot serve as an indicator of learning. And the attempt to summarise a person with the concept of a general ability is not supported by the data.
This post moves that into action. But let me say one thing in advance. None of the five items below guarantees a result. Advice that says it guarantees one does not exist in this field. And the last section sets out the cases where this advice does not hold, which may be more practical than the five items before it.
1. Narrow the domain to where feedback arrives
Of the five criteria Ericsson set out in 2020 when he explained his original framework again, three are related to feedback. A well-defined task with a clear goal, immediate informative feedback that can be turned into action, and the opportunity to repeat the same or a similar task (Ericsson, 2020, read 2026-08-16).
A criterion for choosing a domain comes out of this. Whether a domain is a good one to learn in can be judged not by how fun it is or how promising it looks, but by the speed and the resolution of its feedback.
Why this matters shows up in numbers as well. In the 2014 meta-analysis by Macnamara and colleagues, the variance explained by deliberate practice was 26 percent in games, 21 percent in music, and 18 percent in sports, while it was 4 percent in education and under 1 percent in the professions (Macnamara et al., 2014, read 2026-08-16).
Look at that ordering and one regularity appears. The domains at the top are the ones where the result comes out immediately and clearly. The ones at the bottom are where the result comes out late and mixed in with several factors. The domains where practice has a large effect overlap with the domains where the feedback is good.
Applied to actual work it comes out like this. The goal of wanting to be good at planning gets its feedback months later. Leaving a decision from a meeting written down as a document, by contrast, gets checked at the next meeting. Starting with the latter is better. The goal is not being made smaller; it is being cut into a learnable size.
2. Build the feedback loop before the volume
The most common form of failure is the order being inverted. Do a lot first, and check later.
The replication study Macnamara and Maitra published in Royal Society Open Science in 2019 carried out the original 1993 study again with violin majors. They introduced a double-blind procedure and changed the statistical handling (Macnamara & Maitra, 2019, read 2026-08-16).
The correspondence between cumulative practice volume and skill level was replicated, but the effect size was considerably smaller than in the original. And a further result was reported alongside it: that teacher-designed practice did not explain additional variance beyond practice done alone.
It is important not to exaggerate this result in either direction. It does not mean practice is meaningless. It means that the attempt to explain skill with the single variable of practice volume does not work as well as expected.
So in practical terms it is better to invert it like this. Before deciding how many hours to spend this week, first decide what you will know this week about what went well and what did not. If there is no way to check, do not increase the time. Increasing it will not turn into anything.
3. Practise under the conditions you will perform in
If the practice conditions and the real conditions are different, what you built in practice does not come out in the real thing.
What shows this principle most sharply is the condition-by-condition result of a contextual interference meta-analysis. In the 2024 analysis by Czyż and colleagues, the overall retention effect was a standardised mean difference of 0.63, but under laboratory conditions it was 0.92 and under field conditions it was 0.23, which was not significant (Czyż et al., 2024, read 2026-08-16).
The original meaning of this result is a warning about the generalisability of the contextual interference effect. But there is something that can be read alongside it here. That when the conditions change, the result changes too. If what held in the laboratory did not hold in the field, then in an individual's own practice a difference in conditions is likely to work the same way. This is an inference, not the conclusion of that paper.
Moved into practice it looks like this. If you want to be good at presenting, you have to stand up, put a clock on it and speak, instead of sitting and polishing the script. If you want to handle English in meetings, you have to speak in front of people instead of reading alone. Something you have never once done under pressure does not come out under pressure.
Fourteen Things Table Tennis Taught Me has the same item. That a technique you have not used in a match never ends up being yours. A sentence that came out of experience and a sentence that came out of data point in the same direction.
4. Look for the recurring error, not the enjoyable skill
People lean toward practising what goes well. It goes well so it feels good, and because it feels good they do more of it.
But as we saw in the previous post, learners cannot accurately judge what was effective for them. In the 2023 study by Do and Thomas, participants saw the benefit of interleaved practice and did not recognise that benefit (Do & Thomas, 2023, read 2026-08-16).
If that is so, what to practise must not be decided by feel. It has to be decided by the record.
Let me write down the method as a constructed example. For one week, write down only the moments that failed, briefly. When, what, and how it did not work. Look at that list at the weekend and generally three or four items appear repeatedly. What you practise next week is the repeated item, not the item you want to do. This is not an actual case but an example constructed to explain the procedure.
The core of this method is not the list but the criterion of repetition. Something that failed once may be a situation, but something that has repeated three times is a structure.
5. Expect the plateau
The plateau is closer to a default than to an exception.
The most direct material is on the sports side. In the meta-analysis Macnamara, Moreau, and Hambrick published in Perspectives on Psychological Science in 2016, deliberate practice explained 18 percent of the variance in sports performance. But looking only at athletes at the very highest level, that value dropped to 1 percent (Macnamara et al., 2016, read 2026-08-16).
One more thing came out of the same study. The athletes who reached a high level had not started the sport at a younger age than the athletes at lower levels.
Read practically, these two results come out like this. The higher the skill goes, the smaller the part explained by practice volume becomes. What used to grow when you added time stops doing so from some point onward. This is not a signal of failed self-management but a foreseeable point.
As for what should be done here, I do not have a verified answer. The advice commonly given is to change the type of practice, but this time I could not confirm material that supports that advice. So here I will say only this much, that you should expect it. Expecting and preparing are different things, but an unexpected plateau makes people quit, whereas an expected one does not.
6. On mindset, carefully
Growth mindset is one of the most widely cited concepts from learning psychology in Korea. It is better to write down the current state accurately. The evidence grade of this item is under debate.
The starting point is the two meta-analyses Sisk and colleagues published in Psychological Science in 2018. The first examined the relationship between mindset and academic achievement across 273 samples totalling 365,915 people, and the second examined the effects of interventions across 43 samples totalling 57,155 people. In the authors' own words, the overall effects were weak in both meta-analyses. Alongside that, a result was reported that there may be benefits for students of low socioeconomic status or in academic risk groups (Sisk et al., 2018, read 2026-08-16).
The follow-up meta-analysis Macnamara and Burgoyne published in Psychological Bulletin in 2023 reached a stronger conclusion. In an analysis covering 63 studies and 97,672 people in total, the overall effect was 0.05, and it became non-significant once publication bias was corrected for. Looking only at the 13 studies that actually changed students' mindsets as intended, it was 0.04 and non-significant, and looking only at the 6 studies of the highest quality, it was 0.02 and non-significant. The authors concluded that the apparent effects of growth mindset interventions are likely attributable to inadequate study designs, reporting flaws, and bias (Macnamara & Burgoyne, 2023, read 2026-08-16).
But there is material on the other side too. The nationwide experiment Yeager and colleagues published in Nature in 2019 reported that an online intervention of under one hour, delivered to secondary school students in the United States, improved the grades of lower-achieving students and increased enrolment in advanced mathematics courses. It also reported the condition that the effect held when peer norms matched the message of the intervention (Yeager et al., 2019, read 2026-08-16).
And the commentary Tipton and colleagues wrote in Psychological Bulletin in 2023 pushes back on methodological grounds. When they reanalysed the data of Macnamara and Burgoyne with up-to-date multilevel methods for handling heterogeneity, the result came out at 0.09 overall and 0.15 for the risk group, which was similar to the values Burnette and colleagues had reported (Tipton et al., 2023, read 2026-08-16).
This is the current state. The enthusiasm of the 2010s is not accurate, and neither is the backlash that says it has completely collapsed. The accurate summary is this. The average effect is small, the focus of the dispute is whether there is an effect for particular groups under particular conditions, and the methodological disagreement has not yet been resolved.
Practically, it can be read like this. The expectation that achievement changes just from changing your mindset has weak evidence behind it. On the other hand there is no basis for saying that working on mindset is meaningless. That is about as far as the data allow.
7. Evidence grade by claim
| Claim | Evidence grade | Source |
|---|---|---|
| The better the feedback in a domain, the more practice explains | Replicated | The domain-by-domain figures in Macnamara et al. 2014 |
| Immediate feedback is a core condition of deliberate practice | Definition within a theoretical framework | Ericsson 2020 |
| The explanatory power of practice volume is smaller than originally claimed | Replicated | Macnamara et al. 2014, Macnamara & Maitra 2019 |
| At the very highest level the explanatory power of practice volume falls sharply | Single meta-analysis | Macnamara et al. 2016 |
| Higher-level athletes did not start earlier | Single meta-analysis | Macnamara et al. 2016 |
| When conditions change, effect sizes change greatly | Replicated | Czyż et al. 2024 |
| Learners cannot judge for themselves which method is effective | Replicated | Do & Thomas 2023 |
| Growth mindset interventions raise achievement | Under debate | Sisk et al. 2018, Macnamara & Burgoyne 2023, Yeager et al. 2019, Tipton et al. 2023 |
| Changing the type of practice breaks through a plateau | Failed to obtain material | No citation |
When this advice does not apply
This is the most important section in the post.
First, domains where feedback is slow or absent. All the advice above presupposes feedback. But there are jobs where the result comes out several years later. Changing an organisational culture, long-term research, raising a child. In domains like these the deliberate practice framework does not apply as it stands. The explanatory power of under 1 percent for the professions in the meta-analysis by Macnamara and colleagues is likely to have the same reason behind it. In domains like these, the problem of leaving a record of the grounds for your judgement becomes more important than the problem of raising your skill.
Second, domains where access is more decisive than skill. In some fields, where you are decides the result more than what you can do. Where opportunity is not evenly distributed, advice that talks only about skill is only half honest. None of the material in this series dealt with the question of access, and that is a limitation of this series.
Third, cases where the goal slides toward what is measurable. The advice to prioritise what gives fast feedback has a side effect. You end up doing only what is easy to measure. Many important things are hard to measure, and if you stack up only what is easy to measure, the total grows but the direction disappears.
Fourth, cases where expertise is not the goal. This is the item most often forgotten. The moment you turn a hobby into training, what you were getting from that activity can disappear. There are activities that are fine not improving. The attitude of making every activity an object of improvement is not, in itself, a verified way of living well.
Fifth, cases where your current state needs recovery rather than learning. All the advice above presupposes having something left in reserve. Making a list of your errors while depleted turns easily into self-blame rather than learning.
Closing
Reduced to five sentences it is this.
Cut the goal down to the size that feedback reaches. Build the way of checking before you increase the time. Do it under real conditions. Make the recurring error next week's task. Know in advance that a plateau is coming.
And knowing where these five do not hold matters as much as knowing the five. If your own domain is one where feedback is slow, most of the advice above does not apply as it stands. Not knowing that and blaming yourself is the most common side effect of advice in this field.
One last thing. What this series confirmed over and over comes down to one point. Expertise is narrow. Narrow sounds like bad news, but it is actually good news. What is narrow can be decided on, and what can be decided on can be started.
Related posts:
- Previous post: What It Means to Be Smart — what gets measured and what does not.
- First post in the series: What Studying Well and Playing Sport Well Share Is Narrower Than It Looks
- Fourteen Things Table Tennis Taught Me — a post that reached the same conclusion through experience.
- Deliberate Practice Path Tool — a tool for laying out a practice path based on weaknesses.
- Shadowing Tool — a practice tool for repeating out loud under real conditions.
References
Below are the sources checked directly on 2026-08-16 while writing this post. The links are the addresses actually read, and some are public API responses from Europe PMC.
- Ericsson, K. A. (2020). A response to Macnamara and Hambrick (2020). Psychological Research
- Macnamara, B. N., Hambrick, D. Z., & Oswald, F. L. (2014). Deliberate Practice and Performance in Music, Games, Sports, Education, and Professions: A Meta-Analysis. Psychological Science
- Macnamara, B. N., & Maitra, M. (2019). The role of deliberate practice in expert performance: revisiting Ericsson, Krampe and Tesch-Römer (1993). Royal Society Open Science
- Macnamara, B. N., Moreau, D., & Hambrick, D. Z. (2016). The Relationship Between Deliberate Practice and Performance in Sports: A Meta-Analysis. Perspectives on Psychological Science
- Czyż, S. H., Wójcik, A. M., Solarská, P., & Kiper, P. (2024). High contextual interference improves retention in motor learning: systematic review and meta-analysis. Scientific Reports
- Do, L. A., & Thomas, A. K. (2023). The Underappreciated Benefits of Interleaving for Category Learning. Journal of Intelligence
- Sisk, V. F., Burgoyne, A. P., Sun, J., Butler, J. L., & Macnamara, B. N. (2018). To What Extent and Under Which Circumstances Are Growth Mind-Sets Important to Academic Achievement? Two Meta-Analyses. Psychological Science
- Macnamara, B. N., & Burgoyne, A. P. (2023). Do growth mindset interventions impact students academic achievement? A systematic review and meta-analysis. Psychological Bulletin
- Yeager, D. S., et al. (2019). A national experiment reveals where a growth mindset improves achievement. Nature
- Tipton, E., Bryan, C., Murray, J., McDaniel, M., Schneider, B., & Yeager, D. S. (2023). Why Meta-Analyses of Growth Mindset and Other Interventions Should Follow Best Practices for Examining Heterogeneity. Psychological Bulletin, 149(3-4), 229-241