Эффект тестирования

Краткий обзор

Категория Детали
Определение Материал, который учащийся пытается вспомнить, сохраняется в памяти на протяжении дней и недель лучше, чем материал, который он за то же время просто изучает повторно. Это преимущество для памяти относится к наиболее воспроизводимым результатам исследований обучения. Искажение заключается в выборе учащегося: большинство людей предпочитают перечитывание, потому что оно кажется беглым и продуктивным, и редко проверяют себя. Это эффект памяти и обучения, а не ошибка суждения, и он уменьшается, когда обратная связь не дается, а при пробной попытке учащийся вспоминает очень мало.
Категория Что нам следует запомнить? (мы храним воспоминания по-разному в зависимости от того, как они были пережиты)
Сложность преодоления Средняя
Распространенность Частая (преимущество в сохранении воспроизводится в сотнях лабораторных и школьных исследований; при очень коротких интервалах эффект меняет знак, без обратной связи при слабом начальном воспроизведении он невелик, а для очень сложного материала остается предметом споров. Пренебрежение самопроверкой широко распространено среди учащихся, но не универсально)
Связанные когнитивные искажения Иллюзия компетентности (иллюзия беглости), Эффект интервала, Эффект генерации, Торможение памяти, Эффект уровней обработки, Эффект сверхуверенности

1. Краткое содержание

Эффект тестирования состоит в том, что извлечение информации из памяти укрепляет ее сильнее, чем повторное предъявление той же информации перед глазами. Студентка, которая прочитала текст один раз, а затем записала все, что помнит, обычно опережает студента, прочитавшего его дважды, при условии что итоговая проверка проходит через несколько дней, а не через несколько минут. Во время учебы первой хуже: воспроизведение требует усилий и обнажает пробелы, а перечитывание идет гладко и кажется знакомым. Учащиеся доверяют этому ощущению, поэтому подавляющее большинство выбирает перечитывание и выделение маркером, а не самопроверку. Метаанализы лабораторных и школьных исследований оценивают выигрыш примерно в половину стандартного отклонения, но он зависит от условий: обратная связь важна, а тренировочный тест, на котором вы почти ничего не вспомнили, мало помогает, если потом не посмотреть ответы.


Простыми словами

Эффект тестирования означает, что ты лучше запоминаешь то, что пытаешься достать из головы, чем то, что просто перечитываешь. Попытка вспомнить работает как зарядка для памяти. Перечитывать легче, но толку от этого меньше.

Представь диктант в пятницу. В понедельник ты читаешь список слов пять раз. Твоя подруга читает его один раз, закрывает и пытается написать каждое слово по памяти, а потом проверяет те, в которых ошиблась. Читать приятно, ведь каждое слово выглядит знакомым. Подруга немного буксует. В пятницу она пишет правильно больше слов, чем ты. Слова казались тебе знакомыми, но ты ни разу не тренировался доставать их из собственной головы.

Вот простая хитрость. Прочитав то, что нужно выучить, закрой книгу. Скажи вслух или запиши, что запомнил. Потом открой книгу и проверь, что упустил. Повтори через день или два. Это будет труднее, чем перечитывать, и это признак того, что способ работает.


2. Научные основы

2.1. Открытие и история

Люди замечали это задолго до того, как психологи это измерили. Фрэнсис Бэкон писал в 1620 году, что двадцать прочтений текста учат его хуже, чем десять прочтений с попытками пересказать его по памяти. Уильям Джеймс в 1890 году высказал ту же мысль об «активном» и «пассивном» повторении.

Первое систематическое исследование появилось в 1917 году, когда Артур Гейтс из Педагогического колледжа Колумбийского университета опубликовал работу Recitation as a Factor in Memorizing. Школьники заучивали бессмысленные слоги и короткие биографии. Одни тратили все время на чтение; другие часть времени «декламировали», то есть отводили взгляд от текста и пытались вспомнить. Дети, отдававшие декламации большую долю времени, нередко больше половины, запоминали больше.

В 1939 году Герберт Спитцер протестировал 3605 шестиклассников из 91 школы штата Айова. Они читали короткие статьи с фактами и проходили тесты по разным графикам в течение следующих двух месяцев. Дети, которых проверили вскоре после чтения, за последующие недели забыли гораздо меньше, чем те, чей первый тест был позже. Спитцер пришел к выводу, что тесты сами по себе являются инструментом обучения.

Образование в основном это проигнорировало. Тесты остались в конце учебных тем как измерительный инструмент. Современное возрождение интереса связано с Генри Редигером и Джеффри Карпике (2006): на прозаических текстах они показали, что перечитывание выигрывает при проверке через пять минут, а тестирование явно выигрывает через два дня и через неделю. Последовали сотни исследований, в том числе эксперименты в школьных классах под руководством Пуджи Агарвал, Марка Макдэниела и Кэтлин Макдермотт.

Метаанализы также очертили границы эффекта. Кристофер Роуланд (2014) нашел эффект надежным, но более сильным, когда тренировочный тест требовал воспроизведения, а не узнавания, и более сильным при обратной связи. Без обратной связи элементы, которые учащийся не смог извлечь, не получают прироста, поэтому трудный тест без ответов мало помогает. Тамара ван Гог и Джон Свеллер (2015) утверждали, что эффект слабеет для очень сложного, взаимосвязанного материала; Карпике и Алтея Ауэ (2015) возразили, что данные о сложных материалах убедительнее, чем следует из этой оценки. Вопрос остается открытым.

Само «искажение» относится к учащемуся. В эксперименте Редигера и Карпике многократно перечитывавшие студенты были больше всех уверены, что запомнят текст, а опрос 2009 года, проведенный Карпике, Эндрю Батлером и Редигером, показал, что большинство студентов перечитывают и очень немногие практикуют воспроизведение. Это пренебрежение тесно связано с иллюзией компетентности (иллюзией беглости).

Ключевые вехи:

  • 1620: Фрэнсис Бэкон отмечает в Новом Органоне, что чтение в сочетании с пересказом по памяти превосходит одно лишь чтение
  • 1917: Артур Гейтс публикует Recitation as a Factor in Memorizing
  • 1939: Герберт Спитцер на 3605 шестиклассниках из Айовы показывает, что ранний тест замедляет забывание
  • 1994: Роберт Бьорк вводит понятие «желательных трудностей», к которым относится и тестирование
  • 2006: Редигер и Карпике публикуют статью «Test-Enhanced Learning» в Psychological Science
  • 2011: Карпике и Блант сообщают в Science, что практика извлечения превзошла построение концептуальных карт
  • 2014: Метаанализ Роуланда в Psychological Bulletin подтверждает эффект
  • 2021: Ян, Ло, Вадильо, Юй и Шенкс объединяют 222 исследования в школьных классах с участием 48 478 учащихся

2.2. Ключевые исследователи

Исследователь Вклад Год
Артур Гейтс Первое систематическое исследование, показавшее, что декламация улучшает память детей 1917
Герберт Спитцер Исследование 3605 шестиклассников из Айовы, показавшее, что ранние тесты уменьшают забывание 1939
Роберт Бьорк Описал извлечение как модификатор памяти; ввел термин «желательные трудности» 1975, 1994
Генри Редигер III и Джеффри Карпике «Test-Enhanced Learning»: повторное изучение выигрывает через пять минут, тестирование через два дня и неделю 2006
Джеффри Карпике и Джанелл Блант Практика извлечения превзошла построение концептуальных карт на проверке через неделю 2011
Нейт Корнелл, Мэттью Хейс и Роберт Бьорк Безуспешные попытки извлечения улучшают последующее обучение 2009
Джон Данлоски и коллеги Признали тренировочное тестирование техникой «высокой полезности» среди десяти учебных техник 2013
Кристофер Роуланд Метаанализ: надежный эффект, более сильный для тестов на воспроизведение; данные поддерживают объяснения через усилие при извлечении 2014
Олусола Адесопе, Доминик Тревисан и Нараянкрипа Сундарараджан Метаанализ 272 величин эффекта тренировочного тестирования 2017
Пуджа Агарвал Эксперименты в средней и старшей школе; обзор прикладных исследований 2011-2021
Чуньлян Ян, Дэвид Шенкс и коллеги Метаанализ 222 исследований в школьных классах (g = 0,499) 2021

2.3. Знаковые исследования

«Test-Enhanced Learning» (Редигер и Карпике, 2006)

Студенты колледжа читали короткие научно-популярные тексты. Каждый текст либо читали дважды, либо читали один раз, после чего проходили тест на свободное воспроизведение без обратной связи. Итоговый тест проводился через пять минут, два дня или неделю. Через пять минут лучше справились перечитывавшие. Через неделю студенты, прошедшие тренировочный тест, вспоминали около 56 процентов идей против примерно 42 процентов у перечитывавших. Второй эксперимент показал тот же разворот при сравнении трех тестов с тремя дополнительными прочтениями, и самыми уверенными были многократно перечитывавшие.

«Metacognitive Strategies in Student Learning» (Карпике, Батлер и Редигер, 2009)

Из 177 опрошенных студентов колледжа 84 процента назвали перечитывание одной из своих стратегий, а 55 процентов поставили его на первое место. Лишь 11 процентов описали практику воспроизведения, и 1 процент (2 студента) поставил ее на первое место. На вопрос, что они сделают после прочтения главы, 57 процентов выбрали перечитать ее и 18 процентов проверить себя; доля выбравших самопроверку выросла до 42 процентов, когда после нее можно было перечитать. Повторный анализ 2019 года, выполненный Кристофом Кухбандером и Катариной Эммердингер, внес оговорку: в их более подробных опросах немногие студенты предпочитали перечитывание на поздних этапах учебы, и значительная часть перечитывания приходилась на непонятые фрагменты.

«Retrieval Practice Produces More Learning than Elaborative Studying with Concept Mapping» (Карпике и Блант, 2011)

Студенты читали научные тексты, а затем изучали их один раз, изучали многократно, строили концептуальную карту с текстом перед глазами или практиковали свободное воспроизведение. Через неделю практика извлечения превзошла построение карт и в дословных вопросах, и в вопросах на вывод, требовавших связывать идеи, и по-прежнему выигрывала, когда на итоговом тесте нужно было нарисовать концептуальную карту. Студенты предсказывали обратное. Исследователи концептуальных карт во главе с Джоэлом Минцесом оспорили методику в техническом комментарии в Science, и Карпике и Блант ответили в том же номере.

«Unsuccessful Retrieval Attempts Enhance Subsequent Learning» (Корнелл, Хейс и Бьорк, 2009)

Участники отвечали на вопросы, ответ на которые не могли знать, например на вымышленные викторинные вопросы или угадывали слабую ассоциацию к слову-подсказке («кит» к слову «млекопитающее»). В одном условии они сначала угадывали, а затем видели ответ; в другом видели вопрос и ответ вместе все отведенное время. Даже после исключения правильных догадок предварительное угадывание давало лучшее запоминание в дальнейшем. Неудачная попытка не пропадает зря, если ответ следует быстро.

Метаанализы (Роуланд, 2014; Адесопе, Тревисан и Сундарараджан, 2017; Ян и др., 2021)

Роуланд обнаружил надежное преимущество тестирования над повторным изучением, более сильное, когда тренировочный тест требовал воспроизведения, причем данные говорили в пользу объяснений через усилие при извлечении, а не через семантическую элаборацию. Адесопе и коллеги объединили 272 величины эффекта и выяснили, что тренировочные тесты превосходят повторное изучение и все прочие контрольные условия. Ян и коллеги ограничились школьными классами: 222 исследования и 48 478 учащихся дали средний эффект g = 0,499, более сильный при корректирующей обратной связи, при повторных опросах и когда формат опроса совпадал с форматом экзамена.

2.4. Нейробиологические основы

Нейробиологических данных мало. Большинство исследований с нейровизуализацией небольшие, используют списки слов и сравнивают извлечение с повторным изучением, из-за чего причину трудно отделить от корреляции.

В фМРТ-исследовании Эрик Винг, Элизабет Марш и Роберто Кабеза (2013) обнаружили, что первичное извлечение, ведущее к последующему припоминанию, сильнее, чем повторное изучение, задействует передний гиппокамп, латеральную височную кору и медиальную префронтальную кору, а также усиливает связи гиппокампа с префронтальными областями. Джеймс Энтони, Катарина Феррейра, Кеннет Норман и Мария Вимбер (2017) предположили, что извлечение работает как быстрый путь к консолидации: повторная активация воспоминания во время бодрствования, возможно, воспроизводит гиппокампально-неокортикальные паттерны примерно так, как это, по существующим представлениям, делает сон. Это пока гипотеза.

Метакогнитивной половине явления особые механизмы не нужны. Люди судят о своем обучении отчасти по тому, насколько легко материал обрабатывается в данный момент. Перечитывание повышает эту легкость, а с ней и уверенность; усилие при воспроизведении снижает и то, и другое.


3. Эволюционные истоки

Поскольку эффект тестирования является свойством памяти, полезнее спросить, почему память работает именно так.

Извлечение как сигнал востребованности: Джон Андерсон и Лаэл Скулер (1991) показали, что забывание у человека отражает то, как часто информация повторно встречается в окружающей среде. Извлечение воспоминания служит для мозга лучшим свидетельством его полезности, поэтому логично, что извлечение укрепляет его сильнее, чем пассивный повторный контакт, который может произойти случайно.

Хранение и доступ: «новая теория неиспользования» (new theory of disuse) Роберта и Элизабет Бьорк (1992) разделяет, насколько хорошо что-то хранится в памяти и насколько легко до него можно добраться прямо сейчас. Извлечение с усилием, когда доступ ослаб, дает больший прирост в хранении.

Почему перечитывание кажется правильным: на протяжении большей части истории знакомость была неплохим ориентиром для знания. Знакомое лицо или растение, вероятно, уже встречались раньше. Текст, который можно перечитывать по желанию, и экзамены, требующие воспроизведения недели спустя, появились недавно, и в этой обстановке знакомость вводит в заблуждение.

Это правдоподобные интерпретации, а не проверенные эволюционные утверждения.


4. Проявления искажения

4.1. В повседневной жизни

  • Перечитывание карточки с рецептом каждый раз, когда готовишь блюдо, и потребность в ней даже после десятого раза
  • Обильное выделение текста маркером в научно-популярной книге, после которого через месяц в памяти почти ничего не остается
  • Опора на навигатор на маршруте, по которому ездишь каждую неделю, так что дорога так и не запоминается
  • Узнавание слов при чтении на новом языке и ступор, когда нужно говорить
  • Переворачивание обучающей карточки до реальной попытки вспомнить ответ самостоятельно

4.2. На рабочем месте

  • Онбординг на слайдах и пакетах материалов для чтения без упражнений на воспроизведение
  • Тесты по корпоративным регламентам, ответы к которым расположены на предыдущем экране
  • Приравнивание фразы «я прочитал отчет» к уверенности «я могу объяснить содержание отчета»
  • Опросы по итогам тренингов, оценивающие субъективную уверенность сотрудников, что поощряет пассивные форматы обучения

4.3. В бизнесе и маркетинге

  • Приложения для изучения языков и карточки основаны на извлечении из памяти, но работают лишь в том случае, если пользователь дает ответ до открытия карточки
  • Онлайн-курсы продают часы видео, потому что просмотр ощущается как учеба и легко упаковывается в продукт
  • Повторение рекламы формирует узнавание бренда, достаточное для выбора товара на полке, но не обеспечивает спонтанного припоминания деталей

4.4. В политике и медиа

  • Читатели новостных лент после беглого просмотра заголовков чувствуют себя осведомленными, но на следующий день не могут вспомнить основные факты
  • Дискуссии о стандартизированных экзаменах видят в тестах лишь инструмент отчетности и игнорируют обучающую пользу проверок с низкими ставками
  • Извлечение может укреплять и ложные утверждения: многократное припоминание утверждения, которое позже опровергли, может помочь ему закрепиться, поэтому опровержения нужно отрабатывать, а не просто сообщать

4.5. В здравоохранении

  • Ординаторы забывают многое из того, чему учат на конференциях; повторное тестирование с обратной связью дало заметно лучшее сохранение знаний через шесть месяцев, чем листы для повторения (Ларсен, Батлер и Редигер, 2009)
  • Студенты-медики, которые много проверяют себя по карточкам, как правило, получают более высокие баллы на лицензионных экзаменах (Дэн, Глюкштейн и Ларсен, 2015), хотя эта корреляция может отчасти объясняться тем, что более сильные студенты чаще пользуются этими инструментами
  • Пациенты прочитывают рекомендации при выписке один раз; метод «обратного объяснения» (teach-back), при котором пациент пересказывает их своими словами, добавляет этап извлечения

4.6. В финансах и инвестициях

  • Инвесторы, которые прочитали о комиссиях и диверсификации, чувствуют себя подкованными, но при принятии решения не могут объяснить ни то, ни другое
  • Разовые семинары по финансовой грамотности: метаанализ Дэниела Фернандеса, Джона Линча и Ричарда Нетемейера (2014) показал, что такие вмешательства очень слабо влияли на поведение и это влияние со временем угасало; одна из правдоподобных причин в отсутствии повторного извлечения
  • Кандидаты на получение профессиональных сертификатов, которые перечитывают учебники вместо решения практических тестовых заданий

5. Примеры из реальной жизни

Кейс 1: Тестирование на уроках обществознания в шестом классе

  • Контекст: Исследователи из Вашингтонского университета в Сент-Луисе, в том числе Пуджа Агарвал, Генри Редигер, Марк Макдэниел и Кэтлин Макдермотт, работали с учителями пригородной средней школы, чтобы выяснить, помогут ли короткие опросы с низкими ставками ученикам усваивать обычную учебную программу.
  • Что произошло: Шестиклассники проходили короткие опросы с выбором ответа по части материала каждого модуля; другой материал не проверялся или просто повторялся еще раз. Результатом служили настоящие экзамены по главам и за семестр, за которые ученики получали оценки (Редигер, Агарвал, Макдэниел и Макдермотт, 2011).
  • Как проявилось искажение: Повторение означало еще раз пройтись по материалу. Учителя и ученики считали, что готовиться нужно через дополнительное знакомство с материалом, а опросы видели как средство оценки.
  • Последствия: С материалом, по которому проводились опросы, ученики справлялись лучше, чем с материалом без опросов или просто повторенным, и на экзаменах по главам, и спустя недели на семестровых экзаменах, в том числе на экзаменах с письменными ответами.
  • Извлеченные уроки: Короткое, частое извлечение без оценок прямо на обычных уроках улучшает обучение. Эта работа стала образцом для последующих школьных программ, в том числе для книги Агарвал Powerful Teaching.

Кейс 2: Что ординаторы помнили шесть месяцев спустя

  • Контекст: Дуглас Ларсен, Эндрю Батлер и Генри Редигер (2009) изучали ординаторов-педиатров и ординаторов неотложной медицины на учебной конференции, посвященной эпилептическому статусу и миастении.
  • Что произошло: Ординаторов случайным образом распределили так, чтобы по одной теме они проходили тесты с кратким ответом и обратной связью, а по другой изучали лист для повторения. Листы содержали в точности ту информацию, что была в ключах ответов к тестам. Это происходило после занятия и еще дважды с интервалом около двух недель. Примерно через шесть месяцев 40 ординаторов прошли итоговый тест по обеим темам.
  • Как проявилось искажение: Медицинское образование опирается на лекции и раздаточные материалы. Листы для повторения кажутся удобными и полными, и в данном случае они содержали ту же информацию, что и тесты.
  • Последствия: По материалу, который проверяли тестами, результат составил 39 процентов против 26 процентов по изученному материалу (d = 0,91). Оба показателя низкие и отрезвляюще напоминают, как много ординаторы забывают в любом случае.
  • Извлеченные уроки: Для знаний, которые нужны клиницисту спустя месяцы, несколько распределенных во времени тестов с обратной связью лучше многократного повторения того же содержания.

Исторический пример: Исследование Герберта Спитцера в Айове (1939)

Герберт Спитцер хотел выяснить, как быстро школьники забывают прочитанное и может ли тест замедлить забывание. Он привлек 3605 шестиклассников из 91 школы штата Айова. Каждая группа читала короткие статьи с фактами и проходила тесты по своему графику: одни сразу, другие через день, неделю или позже.

Забывание шло быстро. Ранний тест менял кривую: группы, проверенные вскоре после чтения, на последующих тестах сохраняли больше, чем группы, впервые проверенные поздно. Спитцер утверждал, что немедленное воспроизведение следует использовать как метод обучения.

Школы за ним не последовали. Большую часть двадцатого века тесты оставались в конце учебных тем, а повторение означало перечитывание. Его исследование заново открыли после 2006 года. Разрыв в семь десятилетий между его выводом и школьной практикой и есть то пренебрежение, о котором идет речь в этой статье, только в масштабе школьной системы.


6. Последствия и цена искажения

6.1. Личные потери

  • Часы перечитывания и выделения маркером, после которых в памяти почти ничего не остается надолго
  • Результаты экзаменов ниже уверенности, сложившейся во время подготовки, что часто ошибочно принимают за низкие способности
  • Необходимость учить один и тот же материал заново в каждом семестре из-за отсутствия прочной консолидации знаний

6.2. Профессиональные потери

  • Корпоративные бюджеты на обучение тратятся на пассивную подачу контента, который почти не задерживается в головах сотрудников
  • Постоянный поиск одних и тех же процедур, что замедляет работу и увеличивает риск ошибок при стрессе
  • Провал сертификационных экзаменов после многих часов пассивного повторения

6.3. Общественные последствия

  • Время на повторение в школах уходит на повторное знакомство с материалом вместо опросов, которые могли бы дать измеримый прирост
  • Разрыв между учениками, которых дома научили эффективным стратегиям, и теми, кто по умолчанию перечитывает
  • Доказательная база взята в основном из западных условий: в одном обзоре лишь 6 процентов прикладных экспериментов в школьных классах были проведены в странах, не относящихся к WEIRD (Агарвал, Нунес и Блант, 2021)

6.4. Статистические данные

  • Опросы в классах повысили успеваемость на g = 0,499 по данным 222 исследований с участием 48 478 учащихся (Ян и др., 2021)
  • 57 процентов величин эффекта в обзоре 50 школьных экспериментов (5374 учащихся) показали средний или большой выигрыш (Агарвал, Нунес и Блант, 2021)
  • Через неделю после изучения тестирование опередило перечитывание: около 56 против 42 процентов воспроизведенных идей, тогда как через пять минут впереди было перечитывание (Редигер и Карпике, 2006)
  • 84 процента студентов назвали перечитывание своей стратегией и 55 процентов поставили его на первое место; 1 процент поставил на первое место самопроверку (Карпике, Батлер и Редигер, 2009; N = 177)
  • Из десяти учебных техник лишь тренировочное тестирование и распределенная практика получили оценку «высокая полезность»; перечитывание и выделение маркером получили оценку «низкая полезность» (Данлоски и др., 2013)

7. Скрытые преимущества

Тяга к перечитыванию имеет под собой некоторые основания.

  • Перечитывание помогает пониманию: если вы не поняли текст, перечитать его правильно. Извлечение укрепляет то, что вы закодировали; оно не может укрепить то, что вы так и не поняли.

  • В краткосрочной перспективе беглость не обманывает: если проверка через пять минут, перечитывание действительно дает более высокие баллы. Ощущение вводит в заблуждение только насчет более долгого срока.

  • Перечитывание показывает только правильные ответы: тренировочные тесты без обратной связи, особенно тесты с выбором ответа и правдоподобными дистракторами, могут оставить в памяти неправильные ответы (Редигер и Марш, 2005).

  • Слишком узкое тестирование имеет цену: тренировка одних элементов может временно ухудшить память на связанные элементы, которые не тренировались (забывание, вызванное извлечением).

Практический ответ в сочетании: читайте, пока не поймете, а затем переходите к воспроизведению с обратной связью.


8. Самодиагностика: подвержены ли вы этому искажению?

8.1. Чек-лист тревожных признаков

  • При подготовке вы в основном перечитываете конспекты, учебники или слайды
  • Выделение или подчеркивание текста маркером служит для вас главным методом учебы
  • Вы чувствуете готовность к экзамену просто потому, что материал «выглядит знакомым»
  • Вы переворачиваете обучающие карточки раньше, чем предприняли серьезную попытку вспомнить ответ
  • Вы откладываете практические тесты до момента, пока не «выучите все до конца», и в итоге не успеваете их решить
  • Вы видите в опросах способ проверить знания, а не нарастить их
  • Ваши экзаменационные оценки часто оказываются ниже, чем вы ожидали
  • Вы пересматриваете видеолекции вместо попытки пересказать их содержание по памяти
  • Закрыть книгу и попытаться вспомнить прочитанное кажется вам неприятным усилием, поэтому вы редко так поступаете
  • Допустив ошибку в тренировочном задании, вы идете дальше, не разобравшись в правильном ответе

Интерпретация результатов:

  • Отмечено 0-2 пункта: Низкая подверженность
  • Отмечено 3-5 пунктов: Умеренная подверженность
  • Отмечено 6-8 пунктов: Высокая подверженность
  • Отмечено 9-10 пунктов: Очень высокая подверженность

8.2. Вопросы для саморефлексии

  1. Вспоминая последний материал, который вы серьезно изучали, какую долю времени вы потратили на чтение, а какую на воспроизведение по памяти без подсказок?
  2. Когда у вас возникает ощущение, что вы знаете тему, основано ли оно на способности воспроизвести информацию или на простом узнавании?
  3. Что конкретно вы помните из курса или тренинга, пройденного год назад?
  4. Как вы реагируете, когда пытаетесь что-то вспомнить и терпите неудачу?
  5. Если бы завтра вам пришлось без записей преподавать тему, которую вы недавно «выучили», сколько вы смогли бы объяснить?

8.3. Экспресс-сценарий для диагностики

Сценарий: Через три недели вам предстоит сертификационный экзамен. У вас есть учебное пособие на 300 страниц, база практических вопросов и около одного часа в день на подготовку.

Как вы распределите время занятий?

  • A) Внимательно прочитать пособие дважды, выделяя ключевые мысли маркером, а практические вопросы оставить на последние дни перед экзаменом → Высокая подверженность
  • B) Прочитать пособие один раз, а когда появится уверенность, чередовать перечитывание сложных глав с практическими вопросами → Умеренная подверженность
  • C) Прочитать каждую главу один раз для понимания сути, затем отвечать на вопросы по памяти, сверять ответы и возвращаться к пройденным темам каждые несколько дней → Низкая подверженность

9. Как распознать искажение у других

9.1. Поведенческие маркеры

  • Густо исчерканные маркером учебники, много потраченных часов и разочаровывающие оценки
  • Подготовка к презентации через многократное перечитывание слайдов вместо реальной репетиции речи без подсказок
  • Просьба прислать раздаточный материал, чтобы «повторить позже», вместо выполнения практических упражнений на месте
  • Узнает правильный ответ в списке, но не может воспроизвести его без подсказки
  • Удивление, когда просят объяснить то, что человек «проходил» на прошлой неделе

9.2. Маркеры в разговоре

Фразы, которые произносят люди под влиянием этого искажения:

  • «Я прочитал это три раза, так что все должно быть в порядке»
  • «Я перейду к тестам, как только закончу повторять теорию»
  • «Я это знаю, просто прямо сейчас не могу сформулировать»
  • «Здесь мне все кажется знакомым»

Типичные аргументы, которые они приводят:

  • Часы, проведенные за чтением материала, считаются доказательством усвоения
  • Тесты служат только для оценки, поэтому проверять себя до наступления «полной готовности» бессмысленно

Вопросы, которых они избегают:

  • «Смогу ли я записать это по памяти прямо сейчас?»
  • «В чем именно я ошибся в прошлый раз и почему?»

9.3. Ситуационные триггеры

  • Легко читаемый, хорошо оформленный материал, который повышает беглость восприятия
  • Короткие интервалы между чтением и применением информации, маскирующие скорость угасания эффекта знакомости
  • Учебная среда без встроенных опросов
  • Тревога за результат, из-за которой проверка кажется угрозой
  • Постоянно доступные ответы (открытые вкладки, конспекты с поиском, ИИ-помощники)

10. Стратегии преодоления когнитивного искажения

10.1. Быстрые техники

  • Закрыть и вспомнить: прочитав раздел, закройте книгу, запишите по памяти все, что запомнили, и только затем сверьтесь с источником
  • Сначала ответить, затем смотреть: сформулируйте конкретный ответ (пусть даже приблизительную догадку) перед тем, как заглянуть в правильный вариант
  • Всегда сверять результат: сразу разбирайте каждую ошибку; извлечение без обратной связи закрепляет лишь те элементы, в которых вы не ошиблись
  • Спрогнозировать, затем проверить: запишите ожидаемый балл перед началом практического теста, а затем сравните его с реальным результатом

10.2. Долгосрочные стратегии

  • Распределяйте интервалы извлечения: возвращайтесь к материалу через день, через несколько дней и через неделю, объединяя эффект тестирования с эффектом интервала
  • Практикуйте кумулятивное повторение: включайте вопросы по ранее пройденным темам в каждую учебную сессию
  • Будьте готовы к усилию: самопроверка ощущается хуже, чем перечитывание; согласно «желательным трудностям» Бьорка, этот дискомфорт часто сопровождается лучшим сохранением
  • Отдавайте предпочтение воспроизведению: свободное припоминание и краткие ответы, как правило, помогают больше, чем узнавание

10.3. Организация среды

  • Встраивайте опросы: начинайте занятия и тренинги с двухминутного задания на воспроизведение пройденного материала
  • Используйте инструменты интервального повторения, которые требуют дать ответ до того, как он будет показан
  • Держите ставки низкими: опросы без оценок или с небольшим весом в оценке дают пользу без сильного давления
  • Давайте обратную связь быстро: после каждого опроса сразу показывайте правильные ответы

10.4. Когда обращаться за внешней помощью

  • Если результаты раз за разом оказываются ниже вашей уверенности после подготовки
  • Если вы готовитесь к критически важной сертификации и не можете объективно оценить свой реальный уровень
  • Если тревога вообще не дает вам проверять себя

К кому обратиться: к репетитору или напарнику по учебе, у которого ответы, чтобы вы не могли подсмотреть. Попросите его неожиданно задавать вам вопросы и записывать, на чем вы ошиблись, вместо вопроса «Как тебе кажется, я готов?».


11. Практические упражнения

Упражнение 1: Тест чистого листа

  • Цель: заменить пассивное перечитывание свободным извлечением из памяти
  • Необходимое время: 15 минут на одну сессию
  • Материалы: учебный текст, чистый лист бумаги, ручка другого цвета
  • Уровень сложности: начальный
  • Инструкция:
    1. Внимательно прочитайте раздел один раз, стремясь понять суть
    2. Уберите учебные материалы из поля зрения
    3. Запишите на листе все, что удалось вспомнить: идеи, термины, примеры, логические связи
    4. Сверьте записи с оригиналом и отметьте пропуски ручкой другого цвета
    5. Через два дня повторите процедуру до того, как снова откроете учебник
  • Вопросы для рефлексии:
    • Как ваше воспроизведение соотносится с тем, насколько хорошо, как вам казалось, вы знали материал?
    • Какие фрагменты материала выпали из памяти в оба раза?
  • Регулярность: после каждой новой главы или крупной темы

Упражнение 2: Эксперимент с прогнозированием

  • Цель: проверить иллюзию беглости на собственном опыте
  • Необходимое время: 20 минут в первый день, 10 минут неделю спустя
  • Материалы: два сопоставимых набора материалов (например, два списка по 20 иностранных слов), таймер
  • Уровень сложности: средний
  • Инструкция:
    1. Изучите набор A, перечитав его четыре раза подряд
    2. Изучите набор B, прочитав его один раз и проверив себя три раза, сверяясь с ответами после каждой попытки
    3. Потратьте на каждый набор одинаковое время
    4. Запишите свой прогноз: сколько элементов из каждого набора вы вспомните через неделю
    5. Через неделю проверьте память по обоим наборам без предварительного повторения и сравните результат с прогнозом
  • Вопросы для рефлексии:
    • Для какого набора вы предсказывали победу и какой выиграл на самом деле?
    • Что вы измените в привычной методике занятий?
  • Регулярность: один раз, затем еще раз на новом материале, если результат вас удивил

Упражнение 3: Метод обратного объяснения

  • Цель: использовать объяснение по памяти в качестве практики извлечения
  • Необходимое время: 20-30 минут
  • Материалы: собеседник или диктофон
  • Уровень сложности: средний
  • Инструкция:
    1. Выберите тему, которую вы изучали в течение последней недели
    2. Без конспектов и подсказок объясните ее так, будто обучаете новичка
    3. Фиксируйте каждую заминку или пропущенный смысловой пункт
    4. Сверьтесь с первоисточником исключительно по этим проблемным пунктам
    5. Повторите объяснение еще раз через несколько дней
  • Вопросы для рефлексии:
    • В каких именно местах ваше объяснение забуксовало?
    • Какие пробелы вскрылись при объяснении, которые оставались незамеченными при простом чтении?
  • Регулярность: еженедельно для наиболее важных тем

Ежедневная практика

Двухминутное припоминание

В конце каждого дня без записей и подсказок вспомните три вещи, которые вы сегодня узнали, и запишите их.

  • Рекомендуемая продолжительность: 2 минуты
  • Оптимальное время: вечер
  • Отслеживание прогресса: раз в неделю пробуйте воспроизвести каждый записанный пункт до того, как перечитаете его

Еженедельный челлендж

Замена одной сессии чтения на самопроверку

Каждую неделю заменяйте одну привычную сессию перечитывания конспектов или пересмотра видео на решение практических задач, карточки с обязательным ответом перед переворотом или тест чистого листа с обязательной проверкой ответов.

  • Ожидаемые результаты через 4 недели: более надежное запоминание пройденных тем, реалистичная оценка собственных знаний, снижение потребности в авральной зубрежке
  • Вопросы для дневника самонаблюдения:
    • Какие ощущения возникли во время сессии самопроверки по сравнению с обычным перечитыванием?
    • Что удалось обнаружить благодаря тесту, что осталось бы незамеченным при повторном чтении?

12. Рекомендации для целевых аудиторий

Для руководителей и менеджеров

  • Дизайн обучения: интересуйтесь не только объемом программы, но и тем, какая ее доля требует воспроизведения материала без подсказок
  • Рабочие встречи: начинайте регулярные совещания с краткого воспроизведения решений, принятых на предыдущей встрече
  • Оценка результатов: судите о тренинге по проверкам знаний спустя недели; опросы удовлетворенности в день тренинга поощряют пассивные форматы

Для родителей и педагогов

  • Доступное объяснение для детей: «Вспоминать без подсказки похоже на протаптывание тропинки в траве. С каждым разом тропинка становится все заметнее. А повторное подглядывание в ответ похоже на разглядывание карты вместо прогулки пешком».
  • Опросы с низкими ставками: регулярно используйте короткие опросы без оценок, выгрузку из памяти на бумагу или выходные билеты
  • Обратная связь: всегда показывайте правильные ответы после опросов, особенно когда многие задания выполнены с ошибками
  • Обучение навыкам учебы: предложите ученикам самостоятельно провести Упражнение 2

Для медицинских работников

  • Непрерывное образование: выбирайте курсы с банками тестовых вопросов, разбором клинических случаев по памяти и отложенными мини-проверками
  • Подготовка специалистов: в исследовании Ларсена и коллег повторные тесты с кратким ответом и обратной связью превзошли листы для повторения по сохранению знаний через шесть месяцев
  • Обучение пациентов: применяйте обратное объяснение (teach-back), чтобы проверить понимание и укрепить память о рекомендациях

Для специалистов финансовой сферы

  • Подготовка к экзаменам: практические вопросы в экзаменационных условиях эффективнее перечитывания учебной программы
  • Работа с клиентами: просите клиентов кратко пересказать финансовый план своими словами перед завершением консультации
  • Понимание ограничений: вспомнить правило не то же самое, что грамотно применить его в условиях рыночного стресса

13. Взаимодействие с другими искажениями

Искажения, усиливающие данный эффект

Искажение Характер взаимодействия
Иллюзия компетентности (иллюзия беглости) Легкость перечитывания ошибочно принимается за мастерство, из-за чего самопроверка кажется излишней
Эффект знакомства с объектом Повторное предъявление делает материал знакомым, что легко спутать со способностью его воспроизвести
Эффект сверхуверенности Учащиеся переоценивают объем информации, который останется в памяти, и не видят смысла в проверке
Гиперболическое дисконтирование Перечитывание дает сиюминутный психологический комфорт; выгода от тестирования проявляется лишь через дни и обесценивается
Эффект Google (цифровая амнезия) Когда ответ можно мгновенно найти в поиске, люди тренируют поиск информации вместо ее извлечения из памяти

Искажения, ослабляющие данный эффект

Искажение Позитивное влияние
Эффект интервала Распределение занятий во времени требует больших когнитивных усилий при извлечении и делает его результативнее
Эффект генерации Самостоятельное формулирование ответов укрепляет память, а задачи на генерацию естественным образом включают извлечение
Эффект уровней обработки Смысловая обработка во время изучения дает последующему извлечению больше опоры

Типичные цепочки искажений

Эффект знакомства с объектом → Иллюзия компетентности (иллюзия беглости) → Отказ от самотестирования → Эффект сверхуверенности → Низкие результаты на экзамене или в работе

Перечитывание делает материал знакомым. Знакомость принимается за знание. Чувствуя себя готовым, учащийся пропускает самопроверку, поэтому пробелы остаются скрытыми, а уверенность высокой, пока не потребуется вспомнить.

Как разорвать цепочку: вмешаться на втором шаге. Единственная попытка воспроизвести материал без книги заменяет иллюзию беглости объективными данными о том, что действительно удалось запомнить.


14. Культурный контекст

Декламация с исправлением проходит через многие старые образовательные традиции. При заучивании Корана (хифз) ученики воспроизводят текст по памяти перед учителем, который исправляет ошибки. Ведические устные традиции веками сохраняли тексты благодаря структурированной декламации. В еврейской учебе в хевруте учащиеся работают в парах, читая и объясняя тексты друг другу, а императорские экзамены в Китае вознаграждали точное воспроизведение классических текстов. Ни одна из этих традиций не строилась на исследованиях памяти, но в них заложено то, что эти исследования подтверждают: многократные попытки воспроизвести материал по памяти с обратной связью.

Значительная часть современного школьного образования перешла на модель «лекция и чтение», в которой тесты проводятся в конце и служат для выставления оценок. Исследования указывают, что проблема тестирования в высоких ставках и редкости, а не в самом извлечении. Однако доказательная база узка: Агарвал, Нунес и Блант (2021) обнаружили, что лишь 6 процентов прикладных экспериментов в школьных классах проведены в странах, не относящихся к WEIRD, и прямых исследований того, различаются ли между культурами сам эффект или предпочтение перечитывания, мало.

Тип культуры Особенности проявления
Традиции декламации (коранические школы, ведическое обучение) Воспроизведение по памяти с исправлением учителем, старая форма практики извлечения с обратной связью
Системы с интенсивными экзаменами (часть стран Восточной и Южной Азии) Интенсивное использование тренировочных вопросов, часто связанное с высокими ставками и зубрежкой
Системы «лекция и чтение» (значительная часть западного высшего образования) В самостоятельной учебе преобладают перечитывание и выделение маркером; тесты в основном служат для оценки
Классы, где внедряют опросы с низкими ставками Короткие частые опросы с обратной связью как инструмент обучения

15. Мифы и заблуждения

Миф Реальность
«Тесты лишь измеряют знания, но не способствуют их усвоению» Извлечение само по себе укрепляет память. В 222 школьных исследованиях опросы повысили успеваемость примерно на половину стандартного отклонения (Ян и др., 2021), даже когда не влияли на оценки
«Это работает только для механического заучивания фактов» Польза распространяется на связные тексты, научные понятия и вопросы на вывод (Карпике и Блант, 2011). Сохраняется ли она для очень сложного материала, остается предметом споров (ван Гог и Свеллер, 2015; Карпике и Ауэ, 2015)
«Если вы не смогли ответить, тест прошел впустую» Неудачные попытки помогают, если за ними следует правильный ответ (Корнелл, Хейс и Бьорк, 2009). Без обратной связи элементы, которые не удалось вспомнить, выигрывают мало, поэтому очень трудные тесты без ответов помогают меньше всего
«Перечитывание до чувства знакомости служит самой надежной подготовкой» Перечитывание выигрывает при проверке через несколько минут; тренировочное тестирование выигрывает через два дня и через неделю (Редигер и Карпике, 2006)
«Практика извлечения означает больше экзаменов с высокими ставками» Польза дает воспроизведение с низкими ставками и обратной связью. Карточки, выгрузка из памяти на бумагу и опросы без оценок работают

16. Взгляды экспертов

«Если вы прочтете отрывок текста двадцать раз, вы не выучите его наизусть так же легко, как если бы прочитали его десять раз, пытаясь время от времени декламировать его по памяти и заглядывая в книгу лишь тогда, когда память подводит». — Фрэнсис Бэкон, Новый Органон, 1620 (в часто цитируемом английском переводе)

«Любопытная особенность нашей памяти заключается в том, что вещи запечатлеваются лучше при активном, чем при пассивном повторении». — Уильям Джеймс, Принципы психологии, 1890

«Тестирование служит мощным средством улучшения обучения, а не только инструментом его оценки». — Генри Редигер III и Джеффри Карпике, Psychological Science, 2006

Условия, из-за которых учеба кажется медленнее и труднее, например самопроверка вместо перечитывания, часто дают лучшее долговременное сохранение, а условия, при которых учеба кажется легкой, могут создавать иллюзию мастерства. — Роберт Бьорк (пересказ его работ о «желательных трудностях»)


17. Главные выводы

  1. Извлечение укрепляет память: попытка вспомнить информацию улучшает долговременное сохранение сильнее, чем повторное изучение. Метаанализы исследований в школьных классах находят выигрыш средней величины.

  2. От времени зависит победитель: перечитывание выигрывает при проверке через несколько минут. Тестирование выигрывает при интервале в дни или недели, а именно тогда знания обычно и нужны.

  3. Искажение заключается в выборе: большинство студентов перечитывают и немногие проверяют себя, потому что перечитывание кажется беглым, а воспроизведение требует усилий. Это напрямую связано с иллюзией компетентности (иллюзией беглости).

  4. Обратная связь важна: с обратной связью помогают даже неудачные попытки. Без нее польза зависит от того, сколько удается вспомнить, а очень трудные тесты без ответов помогают меньше всего.

  5. Низких ставок достаточно: чтобы опросы работали, их не нужно оценивать. Короткое частое воспроизведение с последующим показом правильных ответов составляет основу методики.

  6. Сочетайте с интервалами: извлечение, распределенное на дни и недели, лучше извлечения за одно занятие, и это связывает данный эффект с эффектом интервала.

  7. Знайте границы: это эффект памяти и обучения, и сильнее всего он проявляется для материала, который вы уже понимаете. Для очень сложного материала он может ослабевать и может закреплять ошибки, которые так и не исправили.


18. Дополнительные материалы

Научные статьи

  • Gates, A. I. (1917). Recitation as a factor in memorizing. Archives of Psychology, 6(40).
  • Spitzer, H. F. (1939). Studies in retention. Journal of Educational Psychology, 30(9), 641-656.
  • Roediger, H. L., & Karpicke, J. D. (2006). Test-enhanced learning: Taking memory tests improves long-term retention. Psychological Science, 17(3), 249-255.
  • Karpicke, J. D., Butler, A. C., & Roediger, H. L. (2009). Metacognitive strategies in student learning: Do students practise retrieval when they study on their own? Memory, 17(4), 471-479.
  • Kornell, N., Hays, M. J., & Bjork, R. A. (2009). Unsuccessful retrieval attempts enhance subsequent learning. Journal of Experimental Psychology: Learning, Memory, and Cognition, 35(4), 989-998.
  • Larsen, D. P., Butler, A. C., & Roediger, H. L. (2009). Repeated testing improves long-term retention relative to repeated study: A randomised controlled trial. Medical Education, 43(12), 1174-1181.
  • Karpicke, J. D., & Blunt, J. R. (2011). Retrieval practice produces more learning than elaborative studying with concept mapping. Science, 331(6018), 772-775.
  • Roediger, H. L., Agarwal, P. K., McDaniel, M. A., & McDermott, K. B. (2011). Test-enhanced learning in the classroom: Long-term improvements from quizzing. Journal of Experimental Psychology: Applied, 17(4), 382-395.
  • Dunlosky, J., Rawson, K. A., Marsh, E. J., Nathan, M. J., & Willingham, D. T. (2013). Improving students' learning with effective learning techniques. Psychological Science in the Public Interest, 14(1), 4-58.
  • Rowland, C. A. (2014). The effect of testing versus restudy on retention: A meta-analytic review of the testing effect. Psychological Bulletin, 140(6), 1432-1463.
  • Adesope, O. O., Trevisan, D. A., & Sundararajan, N. (2017). Rethinking the use of tests: A meta-analysis of practice testing. Review of Educational Research, 87(3), 659-701.
  • Yang, C., Luo, L., Vadillo, M. A., Yu, R., & Shanks, D. R. (2021). Testing (quizzing) boosts classroom learning: A systematic and meta-analytic review. Psychological Bulletin, 147(4), 399-435.

Книги

  • Brown, P. C., Roediger, H. L., & McDaniel, M. A. (2014). Make It Stick: The Science of Successful Learning. Belknap Press of Harvard University Press.
  • Agarwal, P. K., & Bain, P. M. (2019). Powerful Teaching: Unleash the Science of Learning. Jossey-Bass.

Главы в книгах

  • Bjork, R. A. (1994). Memory and metamemory considerations in the training of human beings. In J. Metcalfe & A. P. Shimamura (Eds.), Metacognition: Knowing about Knowing (pp. 185-205). MIT Press.
  • Roediger, H. L., Putnam, A. L., & Smith, M. A. (2011). Ten benefits of testing and their applications to educational practice. In J. P. Mestre & B. H. Ross (Eds.), Psychology of Learning and Motivation (Vol. 55, pp. 1-36). Academic Press.

19. Краткая карточка

Элемент Описание
Название искажения Эффект тестирования
Определение Попытка вспомнить информацию улучшает долговременное удержание сильнее, чем повторное чтение, однако учащиеся в основном предпочитают перечитывать из-за субъективной легкости восприятия
Категория Что нам следует запомнить?
Главный признак Учеба в основном через перечитывание и чувство готовности, потому что материал выглядит знакомым
Основная причина Оценка успешности учебы по сиюминутной легкости восприятия: чтение кажется проще, чем воспоминание
Главный риск Впустую потраченное время и уверенный провал на экзаменах или в рабочих задачах недели спустя
Быстрое решение Закрыть книгу, записать все по памяти и только потом проверить пропущенное
Долгосрочная стратегия Распределенная во времени самопроверка с низкими ставками и обратной связью, встроенная в учебу и тренинги
Главное правило Если легко, вы, скорее всего, узнаете, а не вспоминаете

20. Глоссарий терминов

Термин Определение
Практика извлечения (Retrieval Practice) Намеренное воспроизведение информации из памяти с помощью тестов, карточек или свободного припоминания ради ее усвоения
Эффект тестирования (Testing Effect) Обнаруженная закономерность: извлечение информации улучшает последующее сохранение сильнее, чем повторное изучение
Повторное изучение (Restudy) Повторное чтение или просмотр учебного материала; стандартное контрольное условие в экспериментах
Свободное воспроизведение (Free Recall) Формат проверки, при котором участники записывают или называют все, что помнят, без подсказок и вариантов ответа
Суждение о научении (Judgment of Learning) Прогноз самого учащегося о том, насколько хорошо он вспомнит изученный материал в будущем
Беглость обработки (Processing Fluency) Легкость восприятия или прочтения информации, которую часто ошибочно принимают за реальное знание
Желательные трудности (Desirable Difficulties) Условия, например тестирование и распределение во времени, которые ощущаются труднее, но улучшают долговременное сохранение (Бьорк)
Предварительное тестирование (Pretesting) Попытка ответить на вопросы до изучения материала, которая может помочь последующему усвоению, если затем показывают ответы
Корректирующая обратная связь (Corrective Feedback) Предъявление правильного ответа после попытки ответить на тест
Забывание, вызванное извлечением (Retrieval-Induced Forgetting) Временное ухудшение памяти на связанную информацию, которая не тренировалась во время активного припоминания других элементов

21. Вопросы для обсуждения

Для книжных клубов, учебных аудиторий или индивидуальной рефлексии:

  1. Почему перечитывание кажется продуктивнее самопроверки даже людям, которые знают исследования?

  2. Если проверочные опросы улучшают усвоение материала, почему большинство школ и организаций используют тесты исключительно для выставления оценок и выдачи сертификатов?

  3. В эпоху поисковых систем и ИИ-помощников, дающих мгновенные ответы, становится ли практика извлечения из памяти более или менее важной? Что нам все еще необходимо удерживать в собственной памяти?

  4. Эффект может быть слабее для очень сложного материала. Как бы вы решили, что лучше подходит для предмета: практика воспроизведения, разбор готовых примеров или их сочетание?

  5. Традиции от коранической декламации до ведического обучения опирались на воспроизведение по памяти с исправлением. Что современное образование может у них взять?