Йегер и др. - Национальный эксперимент показывает, где установка на развитие улучшает успеваемость
Вид: научная статья (Nature, первичное рандомизированное исследование)
Коротко
Вопрос: улучшает ли короткое онлайн-вмешательство об установке на развитие успеваемость подростков в национально репрезентативной выборке и в каких школах эффект держится?
Ответ: По Йегеру и др., короткое онлайн-вмешательство об установке на развитие улучшило оценки менее успевающих учеников и увеличило запись на продвинутую математику в национально репрезентативной выборке, а оценки изменились там, где нормы сверстников совпадали с идеями вмешательства.
Тезисы
Т1. Вмешательство улучшило оценки менее успевающих учеников и увеличило запись на продвинутую математику в национально репрезентативной выборке
- Аргумент: так Йегер и др. формулируют итог по двум исходам, оценкам менее успевающих учеников и общей записи на продвинутые курсы математики, для учащихся средней школы США.
- Цитата: «improved grades among lower-achieving students and increased overall enrolment to advanced mathematics courses in a nationally representative sample of students in secondary education in the United States.»
Т2. Вмешательство передает мысль, что интеллектуальные способности можно развивать
- Аргумент: в описании вмешательства первое занятие излагает основную идею установки на развитие, а именно способность развивать интеллектуальные способности.
- Цитата: «the basic idea of a growth mindset—that an individual’s intellectual abilities can be developed in response to effort, taking on challenging work, improving one’s learning strategies, and asking for appropriate help.»
Т3. Исследование задумано и для того, чтобы понять, для кого и при каких условиях вмешательство улучшает оценки
- Аргумент: помимо оценки среднего эффекта, исследование нацелено на то, для каких учеников и в каких условиях вмешательство улучшает оценки.
- Цитата: «The study was also designed with the purpose of understanding for whom and under what conditions the growth mindset intervention improves grades.»
Т4. На оценки вмешательство действовало слабее в школах с высокой успеваемостью
- Аргумент: слабее оказалась польза для оценок девятого класса именно в школах, которые Йегер и др. относят к высокой успеваемости.
- Цитата: «The intervention showed weaker benefits on ninth-grade GPAs in high-achieving schools.»
Т5. Оценки изменились там, где нормы сверстников соответствовали посланию вмешательства
- Аргумент: нормы сверстников названы школьным условием, при котором эффект вмешательства на оценки сохранялся.
- Цитата: «Notably, the study identified school contexts that sustained the effects of the growth mindset intervention: the intervention changed grades when peer norms aligned with the messages of the intervention.»
Т6. Если смотреть только на оценки, выгоды для учеников школ с более высокой успеваемостью могли бы остаться скрытыми
- Аргумент: по Йегеру и др., взгляд только на оценки скрыл бы пользу вмешательства для учеников школ с более высокой успеваемостью; анализ, из которого это следует, исследовательский (см. «Критику»).
- Цитата: «Thus an exclusive focus on GPA would have obscured intervention benefits among students attending higher-achieving schools.»
Т7. Повторный анализ методом BCF дал картину, близкую к основному анализу
- Аргумент: байесовский повторный анализ показал разный эффект в разных школах так же, как основной анализ: сильнее при поддерживающих нормах, слабее в школах с самой высокой успеваемостью.
- Цитата: «BCF also found stronger CATEs in schools with positive challenge-seeking norms, and weaker effects in the highest-achieving schools»
Т8. Йегер и др. заявляют, что уверенность в выводах дает независимый сбор данных, предрегистрация и слепой байесовский анализ
- Аргумент: это заявление самих Йегера и др. о том, на чем держится доверие к результатам исследования.
- Цитата: «Confidence in the conclusions of this study comes from independent data collection and processing, pre-registration of analyses, and corroboration of results by a blinded Bayesian analysis.»
Пример
Нормы школы измеряли заданием в конце второго занятия. Ученики выбирали математические задачи, описанные как трудные и дающие шанс многому научиться, или как легкие. Норму школы оценивали по среднему числу трудных задач, которые выбирали ученики контрольной группы.
Критика
- Йегер и др. признают, что о роли школьных норм причинных выводов делать нельзя. Цитата: «A limitation of our moderation results, of course, is that we cannot draw causal conclusions about the effects of the school norm, as the norms were measured, not manipulated.»
- Анализ записи на математику, из которого следует Т6, не был предрегистрирован. Цитата: «The enrolment data were gathered with these analyses in mind but since the analyses were not pre-registered, they are exploratory.»
- Исследование не может отделить послание об установке на развитие от послания только об усилии. Цитата: «Although we cannot isolate the effect of the growth mindset message from a message about effort alone, it is unlikely that the mere mention of effort to high school students would be sufficient to increase grades and challenge seeking.»
Связи
- +Установка на развитие — опирается на
- +Фиксированная установка — противоположно
- @Кэрол Двек — см. также
- Йегер и др. — см. также
- Нормы сверстников — см. также