Оценивание · тесты · 3 мин чтения
Что на самом деле проверяет твой тест
Любое задание что-то измеряет. Вопрос в том, совпадает ли это с тем, что вы собирались измерить. Расхождение между замыслом и фактом - самая частая беда самодельных проверочных.
Конструкт - это то, что вы намерены измерить
Прежде чем писать задание, полезно проговорить одно предложение: «это задание проверяет умение X». Если предложение не формулируется, задание меряет что попало.
Типичный пример расхождения: задание на аудирование, где ответ можно получить из вариантов, не слушая запись. Задумано аудирование, измеряется догадливость.
Второй пример: задание на грамматику с трудной лексикой в условии. Ученик знает форму, но не понял предложение - потерял балл за словарь, а не за грамматику.
Две поломки, которые встречаются чаще всего
- Больше одного верного ответа. В пропуск подходит и since, и for при другой трактовке. Задание неразрешимо, а ученик считает, что не знает темы.
- Неверный вариант, который на самом деле верный в другом чтении. Проверяется перебором: подставить каждый дистрактор и попробовать защитить его вслух.
- Ключ угадывается по длине или позиции. Самый длинный вариант чаще верный - и ученики это знают.
- Дистрактор ничего не ловит. Вариант, который никто не выберет, занимает место и снижает различающую силу задания.
Что делает дистрактор хорошим
Хороший неверный вариант воспроизводит конкретную ошибку рассуждения: кальку с русского, путаницу форм, ложного друга, подмену детали в тексте.
Отсюда полезная привычка: помечать, какую именно ошибку ловит каждый дистрактор. Это занимает секунды при составлении и превращает результаты в диагностику - видно не «двенадцать ошибок», а «восемь калек с русского».
Формативное и итоговое
Проверочная работа решает одну из двух задач, и смешивать их неудобно.
Формативная нужна, чтобы решить, чему учить дальше. Её не обязательно оценивать, зато обязательно разбирать, и ошибиться в ней должно быть безопасно.
Итоговая фиксирует результат. Здесь важны сопоставимость и честность процедуры, а разбор идёт уже после.
Практический вывод: если работа влияет на отметку, ученик перестаёт рисковать и начинает выбирать знакомое. Значит диагностику лучше проводить без оценки, иначе она покажет не знания, а осторожность.
Проверка задания перед тем, как давать его группе
Пять минут проверки экономят урок разбирательств. Порядок такой:
- Реши сам, не глядя в ключ. Если задумался дольше, чем рассчитывал, ученики застрянут гарантированно.
- Защити каждый дистрактор вслух. Попробуй обосновать, почему он верный. Получилось - у задания два ответа.
- Прочитай условие глазами того, кто не знает темы. Не подсказывает ли формулировка ответ; не требует ли она лексики, которой в теме нет.
- Проверь распределение ключей. Если верный ответ четыре раза подряд под буквой C, задание проверяет наблюдательность.
Отдельная проверка для заданий на аудирование и чтение: можно ли ответить, не читая и не слушая. Если да, задание меряет догадливость, а не навык.
Что делать с результатами
Проверочная работа приносит пользу не в момент выставления отметок, а в момент, когда по ней принимается решение.
Есть ли задание, где ошиблось больше половины? Скорее всего, дело в задании, а не в группе: проверьте формулировку и ключ.
Есть ли ошибка, повторяющаяся у разных учеников? Это тема следующего урока.
Совпадают ли ошибки с тем, что вы объясняли? Если нет, объяснение не дошло, и повторить его тем же способом бессмысленно.
И практика, которая стоит недорого и меняет отношение группы: разбор работы до того, как объявлены отметки. Пока отметка неизвестна, ученик слушает разбор; после объявления он слушает только цифру.