Формативное оценивание: учиться на неоцениваемой отметке

Преподаватель заканчивает наблюдение и говорит: «Это не пойдёт в оценку. Я просто хочу показать тебе, что я увидел». Часть головы расслабляется. Другая не доверяет: а вдруг всё-таки засчитают? Это напряжение — сердце формирующего оценивания в медицинском образовании. В теории оно существует, чтобы направлять следующий шаг обучения. На практике студенты и преподаватели живут в системе, где почти любые данные однажды могут повлиять на решение о переводе на следующий этап.

NEXO — это ежедневная игра по медицинской диагностике: один клинический случай в день, шесть последовательных подсказок и обратная связь по близости МКБ-10 на пяти уровнях.

В этом тексте объясняется, что такое формирующее оценивание, чем оно отличается от итогового, что говорит литература об обратной связи и программном оценивании и как учиться и преподавать, не превращая каждую встречу в окончательный приговор. Здесь есть таблица, частые вопросы и чек-лист. Текст связан с обратной связью в клинических случаях, рефлексивным портфолио, калибровкой уверенности и EPAs.

Главное

• Формирующее оценивание направляет обучение; итоговое оценивание решает вопрос о переводе на следующий этап или сертификации.
• Одни и те же данные могут служить обеим целям, если система прозрачна; без прозрачности студент воспринимает всё как угрозу.
• Конкретная, своевременная обратная связь, связанная с планом действий, — двигатель формирующего оценивания.
• Программное оценивание объединяет множество точек низкого давления на протяжении времени.
• Культура чистой результативности ограничивает исследование, продуктивные ошибки и честность.
• Тренировка на случаях и разбор рассуждений — это повседневное формирующее оценивание, в школе или вне её.

Содержание

• Что такое формирующее оценивание
• Формирующее и итоговое (и серая зона)
• Обратная связь, которая меняет следующую смену
• Программное оценивание простыми словами
• Как учиться при формирующем оценивании
• Как NEXO помогает тренироваться
• Частые вопросы
• Источники

Что такое формирующее оценивание

Формирующее оценивание — это сбор и интерпретация информации о работе студента с главной целью улучшить обучение, а не вынести окончательный вердикт. В медицинском образовании, основанном на компетенциях, формирующие оценки помогают определить место учащегося на шкале этапов и указать следующий этап освоения (Ryan et al., 2021).

Миллер описал уровни оценки (знает, знает как, показывает как, делает). Формирующее оценивание может работать на разных уровнях, но обретает силу, когда наблюдает работу (показывает как / делает) и возвращает информацию, с которой можно действовать (Miller, 1990).

Чем формирующее оценивание не является

Это не «лёгкий экзамен». Это не отсутствие стандарта. Это не пустая похвала. Это сравнение текущей работы с желаемой, с маршрутом, как закрыть разрыв. Без явного стандарта оно превращается в мнение. Без маршрута — в диагноз без лечения.

Формирующее и итоговое (и серая зона)

Итоговое решает: сдать, перейти на следующий этап, получить сертификацию. Формирующее сообщает: продолжай так, поправь это, потренируй то. Уотлинг и Гинзбург описывают современное напряжение: одни и те же данные питают и суждение, и рост, а граница между ними часто размывается в глазах студента (Watling и Ginsburg, 2018).

Почему студент «чувствует» итоговое оценивание

История неожиданностей («это ведь засчитают»); культура рейтинга; обратная связь в тоне вердикта; отсутствие шанса попробовать снова. В такой атмосфере даже фраза «это не пойдёт в оценку» доходит через фильтр недоверия. Решение не в том, чтобы просто повторять фразу: нужно сделать цель видимой в системе (Watling и Ginsburg, 2018).

Практическая таблица

Аспект	Формирующее	Итоговое
Главная цель	Улучшить следующую работу	Решить вопрос о переводе на следующий этап или сертификации
Момент	Непрерывно, рядом с задачей	Точки принятия решений в учебной программе
Тон обратной связи	Описательный и ориентированный на план	Суждение относительно стандарта
Ошибка	Материал для обучения	Доказательство, влияющее на решение
Следующая попытка	Ожидаемая и желательная	Может отсутствовать
Риск при неправильном использовании	Превращается в театр или исчезает	Порождает страх и учёбу только ради экзамена

Обратная связь, которая меняет следующую смену

Полезные свойства

Эффективная обратная связь обычно конкретна, своевременна, понятна, связана с наблюдаемым поведением и сопровождается планом. Обзоры обратной связи у студентов-медиков находят положительное влияние на знания, навыки и установки по сравнению с отсутствием обратной связи или неструктурированным откликом, при разнородности форматов. В сомнении отдавайте приоритет ясности и плану, а не количеству прилагательных.

Ask-tell-ask и вариации

Райан и коллеги описывают метод ask-tell-ask: попросить самооценку, озвучить наблюдение, спросить о плане студента (Ryan et al., 2021). Ценность в том, чтобы вернуть студенту субъектность (автономию) и сопоставить восприятие с доказательством (откалиброванная компетентность). См. также обратная связь в клинических случаях.

Когда обратная связь не срабатывает

Расплывчатое сообщение; унизительный тон; отсутствие возможности потренироваться снова; расхождение с тем, что студент видел, как другие преподаватели поощряют; когнитивная перегрузка в момент разбора. Обратная связь у двери лифта после двенадцатичасовой смены редко превращается в план. Выделите защищённую минуту.

Чек-лист преподавателя (две минуты)

• Я назвал цель («это чтобы скорректировать следующий случай, а не для итогового заключения на сегодня»)?
• Я описал наблюдаемое поведение (а не черту личности)?
• Я сопоставил это с самооценкой студента?
• Мы договорились о конкретном следующем шаге?
• Есть ли близкая возможность попробовать снова?
• Сохранил ли тон достаточно связи, чтобы сообщение дошло?

Программная оценка простым языком

Программная оценка организует множество точек оценивания с низким давлением на протяжении времени, использует наставничество для интерпретации совокупности и оставляет решения с высокими последствиями для моментов, когда доказательства накопились (van der Vleuten et al., 2012; twelve tips). Простыми словами: несколько снимков успеваемости, разговор об альбоме, и только затем решение о переходе на следующий этап.

Что меняется для студента

Меньше «всё или ничего» на одном экзамене; больше ответственности за участие в непрерывной обратной связи; необходимость понимать, какие данные служат только обучению, а какие пополняют досье для перехода. Без этой оговорки программная оценка становится замаскированной суммативной (Watling e Ginsburg, 2018).

Что меняется для преподавателя

Качественно фиксировать наблюдения; калиброваться с коллегами; сопротивляться превращению каждого мини-CEX в приговор. Грамотность в оценивании становится преподавательской компетенцией, а не только клиническим содержанием (twelve tips programmatic).

Связь с EPAs и этапами

В CBME формативная оценка определяет место студента на этапе и указывает следующий уровень доверенной самостоятельности. EPAs делают разговор конкретным: «в этой деятельности мне пока нужно присутствие; в этой уже достаточно дистанционного надзора» (Ryan et al., 2021; EPAs).

Как учиться при формативном оценивании

Относитесь к формативной оценке как к данным, а не как к приговору

Одно слабое наблюдение во вторник не определяет вашу карьеру. Оно определяет тренировку в среду. Если вы катастрофизируете каждый разбор, формативная оценка теряет смысл. Если вы игнорируете любой разбор, тоже. Золотая середина — калибровка: приводить уверенность в соответствие с доказательствами.

Спросите критерий до задания

«Что вы будете наблюдать сегодня?» меняет занятие. Ясный критерий снижает ощущение произвольного суждения и повышает автономию (теория самодетерминации).

Замкните цикл

Услышали обратную связь → записали следующий шаг → потренировались → попросили новое наблюдение. Без промежуточной тренировки формативная оценка превращается в архив. Короткое портфолио помогает замкнуть цикл (рефлексивное портфолио).

Чек-лист студента

1. До задания спросить критерий наблюдения.
2. После — дать самооценку одним предложением.
3. Попросить в разборе конкретное поведение.
4. Превратить разбор в наблюдаемый следующий шаг.
5. Запланировать попытку с шансом на новую обратную связь.
6. Записать пробел в тетрадь ошибок или короткое портфолио.
7. Эмоционально отделять «формативные данные» от «карьерного вердикта», если только система не заявит обратное.

Культура: результативность против улучшения

Уотлинг и Гинзбург предупреждают, что культура, сосредоточенная только на результативности, ограничивает исследование и честность. Культура улучшения разрешает пробовать, безопасно ошибаться и корректироваться (Watling e Ginsburg, 2018). Студенты могут укреплять эту культуру в малом масштабе: благодарить за конкретную обратную связь; не высмеивать коллегу, ошибившегося на симуляции; просить возможности новой попытки.

Что формативная оценка требует от школы

Защищённое время для наблюдения и разбора; обучение преподавателей; ясность цели инструментов; согласованность между тем, чему учат, и тем, что наблюдают; поддержка, когда обратная связь выявляет большой пробел (план, а не забвение). Без структуры формативная риторика становится перегрузкой.

Признаки здоровой формативной оценки против оценки только по названию

Здоровый подход: прямое наблюдение; студент знает, что в тот день было формирующим, а что итоговым; общий язык ориентиров; ошибка в тренировке порождает план; наставники калибруют ожидаемое для года; временной ряд важнее отдельного эпизода.

Только на словах: всё «может потом засчитаться»; обратная связь лишь ближе к итоговому заключению; слишком много инструментов и слишком мало разговора; самооценка без сверки с доказательством; без второй попытки; публичный и неловкий отзыв.

Связь с когнитивной нагрузкой и мотивацией

Выдать десять замечаний сразу перегружает рабочую память. Выберите одно или два. Поддержка автономии в выборе фокуса обратной связи повышает вовлечённость (когнитивная нагрузка; SDT).

Формирующая оценка при самостоятельной учёбе

Вы можете создать формирующую оценку без преподавателя: разобранный вопрос, случай с гипотезой, записанной до ответа, карта до/после, запись собственной презентации с рубрикой. NEXO и тетрадь ошибок — машины формирующих данных, если вы замкнёте цикл.

План недели с явной формирующей оценкой

Понедельник: короткое наблюдение по согласованному критерию. Вторник: целенаправленная тренировка слабого места (пятнадцать минут). Среда: новая попытка. Четверг: записать в короткое портфолио, что изменилось. Пятница: сессия случаев с гипотезой до ответа. Воскресенье: просмотреть тетрадь ошибок и выбрать фокус следующей недели. План — пример, а не жёсткая сетка; принцип — ритм попытки и возврата, а не накопление суждений без практики.

На стажировках с малым доступом к постоянному преподавателю используйте пары: один наблюдает за другим по рубрике из трёх пунктов и меняются. Работа в парах не заменяет преподавателя, но избавляет от недель без всякого внешнего зеркала. Договоритесь о правилах уважения и фокуса на поведении, а не на личности.

Когда школа смешивает формирующую и итоговую оценку в одном инструменте, попросите письменную легенду. Если её нет, спросите на встрече по стажировке: «Какие из этих мини-CEX входят в заключение, а какие только тренировка?». Вопрос законный и улучшает использование данных всеми (Watling и Ginsburg, 2018; van der Vleuten et al., 2012).

Три сцены формирующей оценки (вымышленные учебные случаи)

Сцена A. Преподаватель наблюдает сбор анамнеза, просит самооценку, указывает, что повестка пациента не была согласована, договаривается, что на следующем приёме студент начнёт с «что для вас сегодня самое важное?», и снова наблюдает днём. Полная формирующая оценка: данные, план, новая попытка.

Сцена B. В конце ротации студент получает неожиданное заключение, основанное на впечатлениях из коридора. Не было заявленного наблюдения и шанса скорректироваться. Ярлык в системе: «непрерывная оценка». Эффект: долгое недоверие к любому «это не считается».

Сцена C. Группа симуляции проводит дебрифинг с явным правилом: первые пятнадцать минут формирующие и защищённые; оценка за станцию идёт по другой рубрике, объявленной заранее. Группа выдвигает больше гипотез. Ясность цели меняет поведение (Watling и Ginsburg, 2018).

Формирующая оценка и психическое здоровье студента

Когда всё кажется итоговым, тревога растёт, а честность падает. Надёжная формирующая оценка не устраняет стресс экзамена, но снижает ощущение постоянного надзора. Если тревога мешает учиться или спать, обратитесь за нужной помощью. Оценка — часть ремесла; сильное страдание быть ею не обязано.

Роль записи

Запись формирующей обратной связи помогает памяти и портфолио. Слишком много записей с юридическим тоном подавляет. Баланс: короткие заметки, ориентированные на поведение и план, доступные студенту, с легендой о цели. Не переносите в итоговое заключение фрагменты, которые были обещаны как только формирующие, не предупредив о правилах игры.

Как согласовать формирующую оценку с NEXO и изучением случаев

До случая: запишите гипотезу. После: сравните с итогом рассуждения. Извлеките поведение («я буду выдвигать три гипотезы до первой подсказки»). На следующей сессии проверьте, выполнили ли. Это самоуправляемая формирующая оценка с доказательством. Сочетайте с концептуальными картами, если пробел в структуре, или с метапознанием, если пробел в мониторинге.

Вопросы к координации стажировки

«Какие инструменты в этом цикле только формирующие?» «За какое время я получу письменную обратную связь?» «Есть ли структурированная возможность повторной попытки после обратной связи?» «Кто калибрует преподавателей?» «Где находится рубрика?» Координаторы, которые отвечают ясно, экономят конфликты и улучшают обучение (twelve tips programmatic; van der Vleuten et al., 2012).

Формирующая оценка на практических экзаменах и тренировочных OSCE

Тренировочные станции с немедленным дебрифингом дают формирующую оценку высокой ценности, если дебрифинг конкретен. Станции, которые только говорят «сдал/не сдал» без обратной связи, тратят наблюдение впустую. Если ваш курс предлагает mock OSCE, требуйте дебрифинг как часть замысла, а не как одолжение.

Операционная сводка

Качественная формирующая оценка = ясная цель + наблюдение + действенная обратная связь + возможность повторной попытки + культура, допускающая ошибку в тренировке. Не хватает любой части — и название «формирующая» становится педагогическим маркетингом. Когда все части на месте, студент получает карту следующего шага, а школа — лучшие данные для решений, которые действительно должны быть суммативными.

Формирующая оценка при переходе с базового на клинический этап

На базовом цикле «формирующая» часто означает тест без веса. На клиническом она начинает означать, что кто-то смотрит, как вы работаете. Смена публичной экспозиции повышает воспринимаемую угрозу. Преподаватели могут назвать это: «Я понаблюдаю десять минут и верну два пункта; это не войдёт в сегодняшнее заключение». Короткая фраза снижает кортизол и улучшает восприятие обратной связи (Ryan et al., 2021).

Студенты могут подготовить переход, тренируя формирующую оценку на базовом этапе: объяснить механизм вслух, получить вопрос от коллеги, скорректировать. Навык слушать обратную связь без срыва тренируется рано.

Что делать с несправедливой или плохо данной обратной связью

Не всякая обратная связь — золото. Если она расплывчата, попросите пример. Если унизительна, зафиксируйте факт и обратитесь в безопасный канал школы; никто не обязан терпеть насилие во имя «обучения». Если она технически сомнительна, сверьте с другим источником и с литературой. Качественная формирующая оценка — это диалог на основе свидетельств работы, а не упражнение во власти.

Связь с крупными экзаменами

Даже те, кто готовится к национальным экзаменам, выигрывают от формирующих циклов: разобранные симуляции, разбор ошибок по типу решения, наставничество по методу. Итоговый экзамен суммативен; путь к нему требует тысячи формирующих. Серия постов об экзаменах (USMLE, MIR, ENARM и аналоги) описывает формат каждого; формирующая логика универсальна: тренировать действие до дня Д.

Преподавателям: как начать завтра без перестройки учебного плана

Выберите наблюдаемую задачу. Объявите критерий одной фразой. Наблюдайте. Попросите самооценку. Верните одно поведение и один план. Предложите новую попытку на той же неделе. Запишите в две строки. Повторите. Этот микроцикл формирующий даже без новой платформы (Norcini и Burch, 2007; Lefroy et al., 2015).

Если нагрузка не позволяет ежедневное наблюдение, обменяйте качественное еженедельное наблюдение на пустые коридорные отписки. Частота без качества превращается в шум; качество без всякой частоты — в заброшенность.

Студентам: как извлечь формирующую оценку в спешащем отделении

Приходите с конкретной просьбой: «Можете понаблюдать за мной только на открытии приёма?». Предложите рубрику из трёх пунктов. Поблагодарите за конкретную обратную связь. На следующей неделе покажите, что изменилось. Занятые преподаватели лучше отвечают на точечные просьбы, чем на «дай мне общую обратную связь».

Заключение

Хорошо проведённая формирующая оценка — это структурированная доброта: она говорит правду о работе вовремя, чтобы можно было изменить курс. Без структуры доброта становится упущением; без доброты структура становится страхом. Медицинскому ремеслу нужно и то, и другое. Используйте формирующую оценку, чтобы учиться публично и безопасно; оставьте суммативную для моментов, когда обществу нужно ясное решение о компетентности.

Формирующая оценка и работа в команде

Обратная связь только от преподавателя оставляет в стороне коллег и других специалистов. В зрелых отделениях медсестра или медбрат, видевшие, как студент общался с семьёй, тоже дают формирующие данные. Включить эти голоса требует культуры и явного разрешения: студент должен знать, что эта обратная связь для обучения, а не для «наполнения досье». Когда это сделано хорошо, картина обогащается; когда плохо — превращается в доносительство. Разница в объявленной цели и праве на ответ.

Мифы, которые мешают

Миф 1: «Если оценивание формирующее, никто не старается». Данные CBME и программного оценивания говорят об обратном, когда культура — развивающая (van der Vleuten et al., 2012). Миф 2: «Формирующему не нужна строгость». Строгость наблюдения и формулировок — именно то, что делает его полезным. Миф 3: «Достаточно итогового». Итоговое без предшествующего формирующего обычно застаёт врасплох и наказывает за пробелы, которые можно было натренировать. Миф 4: «Обратная связь — это разговор в коридоре». Без структуры разговор стирается из памяти; с минимальной структурой он становится планом.

Быстрый мысленный чек-лист, прежде чем назвать что-то формирующим

Прежде чем назвать занятие формирующим, проверьте: была ли цель озвучена вслух? Было ли наблюдение за поведением, а не только впечатление? Указывает ли обратная связь конкретный следующий шаг? Есть ли окно для новой попытки? Если не хватает двух из этих ответов, считайте эпизод чем-то промежуточным и скажите об этом студенту. Честность в отношении замысла ценнее красивого ярлыка.

Один абзац на память

Если вы запомните из этого текста только одну фразу, запомните эту: объявите цель, наблюдайте за поведением, верните следующий шаг и дайте новую возможность. Всё остальное (платформы, длинные рубрики, комитеты) служит этой последовательности. Без неё слово «формирующее» — украшение.

Как NEXO помогает тренироваться

NEXO предлагает вымышленные случаи с реальной клинической картиной, до шести подсказок и разбор хода рассуждений. Каждая сессия — формирующая точка: вы формулируете гипотезы, видите, где разошлись, и корректируете следующий случай. Это не заменяет наблюдение в отделении; это создаёт частоту попыток и обратной связи между сменами.

Смотрите Экономика. Для групп и лиг — NEXO Closer. Для исследований, кураторства и создания — NEXO Researcher, NEXO Curator и NEXO Creators. Чтобы следить за динамикой, — как следить за своим прогрессом.

Частые вопросы

Зачитывается ли формирующее оценивание при переводе на следующий курс?

Зависит от местного устройства. Во многих программных системах формирующие данные питают досье, на котором держится итоговое решение. Спросите регламент своего курса (van der Vleuten et al., 2012).

Если «не идёт в оценку», зачем относиться серьёзно?

Потому что это репетиция перед спектаклем. Игнорировать формирующее — значит тренироваться только в день игры.

В чём отличие от неформальной обратной связи?

Неформальная обратная связь может быть формирующей. Формирующее оценивание обычно более явное, иногда фиксируется, с объявленными критерием и целью (Ryan et al., 2021).

Можно ли оценивать себя формирующе?

Да, и нужно, при условии что это сверяется с внешними данными (вопрос, преподаватель, запись, исход случая). Самооценка в отрыве от данных превращается в мнение.

Что делать с противоречивой обратной связью от двух преподавателей?

Спросите критерий каждого; ищите закономерность во времени; используйте наставничество для интерпретации. Отдельный эпизод весит меньше, чем серия (twelve tips programmatic).

Устраняет ли формирующее тревогу перед экзаменом?

Не устраняет. Оно может уменьшить ощущение «всё решается в один день», если система надёжна. Сильная тревога заслуживает поддержки: обратитесь за нужной помощью.

Как студенту попросить формирующее, не выглядя неуверенным?

Попросите критерий и наблюдение за конкретным поведением. Это говорит о профессионализме, а не о слабости.

Сыграйте случай дня в NEXO и отнеситесь к результату как к формирующим данным: поведение, которое нужно скорректировать завтра, а не приговор вашей карьере. Если пробел в структуре знаний, вернитесь к концептуальным картам. Если в мотивации и автономии, перечитайте теорию самодетерминации. Если в фиксации обучения, используйте рефлексивное портфолио. Оценка, которая не идёт в зачёт, при правильном использовании значит больше всего для изменения действия до итогового решения.

Литература

1. Watling CJ, Ginsburg S. Assessment, feedback and the alchemy of learning. Med Educ. 2019. PMID: [30073692](https://pubmed.ncbi.nlm.nih.gov/30073692/)
2. Ryan MS, et al. Assessment and feedback methods in competency-based medical education. Acad Med. 2021. PMID: [34929390](https://pubmed.ncbi.nlm.nih.gov/34929390/)
3. van der Vleuten CPM, et al. Programmatic assessment: From assessment of learning to assessment for learning. Med Teach. 2012. PMID: [21609177](https://pubmed.ncbi.nlm.nih.gov/21609177/)
4. van der Vleuten CPM, et al. Twelve Tips for programmatic assessment. Med Teach. 2015. PMID: [25410481](https://pubmed.ncbi.nlm.nih.gov/25410481/)
5. Miller GE. The assessment of clinical skills/competence/performance. Acad Med. 1990. PMID: [2400509](https://pubmed.ncbi.nlm.nih.gov/2400509/)
6. Bok HGJ, et al. Programmatic assessment of competency-based workplace learning: when theory meets practice. BMC Med Educ. 2013. PMID: [24020944](https://pubmed.ncbi.nlm.nih.gov/24020944/)
7. Norcini J, Burch V. Workplace-based assessment as an educational tool: AMEE Guide No. 31. Med Teach. 2007. PMID: [18070333](https://pubmed.ncbi.nlm.nih.gov/18070333/)
8. Miller A, Archer J. Impact of workplace based assessment on doctors' education and performance: a systematic review. BMJ. 2010. PMID: [20870696](https://pubmed.ncbi.nlm.nih.gov/20870696/)
9. Saedon H, et al. The role of feedback in improving the effectiveness of workplace based assessments. BMC Med Educ. 2012. PMID: [22563722](https://pubmed.ncbi.nlm.nih.gov/22563722/)
10. Bing-You R, et al. Feedback for learners in medical education: what is known? Med Teach. 2017. PMID: [28097949](https://pubmed.ncbi.nlm.nih.gov/28097949/)
11. Lefroy J, et al. Guidelines: the do's, don'ts and don't knows of feedback for clinical education. Perspect Med Educ. 2015. PMID: [26644395](https://pubmed.ncbi.nlm.nih.gov/26644395/)
12. Heeneman S, et al. What programmatic assessment in medical education can learn from healthcare. Perspect Med Educ. 2017. PMID: [28397009](https://pubmed.ncbi.nlm.nih.gov/28397009/)

<!-- revisao_clinica_thiago: Cenas ficticias A/B/C de ensino. Sem conduta prescritiva. Capa Medical_instruments CC0 (tambor). Corpo: Pharmacy_Jar_MET_DP306014 CC0, Kocher_clamp_01 PD, Surgical_retractor_05 CC0. -->