Занятие 3. Хорошие задания: закрытые, открытые и компетентностные

Закрытые задания: основа и варианты

• Основа должна быть понятна сама по себе и ставить одну чёткую проблему. Уберите ненужный материал: лишние слова проверяют чтение, а не предмет. Пишите вопрос или предложение для завершения, а не пропуск посередине.
• Варианты должны быть схожи по длине, грамматике и подробности и не пересекаться. Избегайте «всё перечисленное» и «ничего из перечисленного»: до них можно добраться по частичному знанию. Избегайте отрицаний; если нужно, выделите его (НЕ).
• Меняйте позицию ключа по всему тесту и проверяйте, что ни один вариант не выдаёт себя тем, что он самый длинный, самый подробный или единственный подходит по грамматике основы.

Отвлекающие ответы из реальных ошибок

• Хороший отвлекающий ответ неверен так, как ошибаются настоящие ученики. Берите их из прежних неверных ответов, билетов на выходе или известных вам типичных ошибок: сложение вместо умножения, путаница двух терминов, взятие первого числа из текста.
• Сначала пишите ключ, потом каждый отвлекающий ответ, имея в виду его ошибку. Если вы не можете назвать ошибку за вариантом, это, скорее всего, заполнитель. Три хороших варианта лучше четырёх с нелепым.
• Проверьте задание вслепую: попросите коллегу решить его без ключа. Если он колеблется между двумя вариантами или выбирает другой ключ, в задании есть изъян, которого вы не видите.

Задания с открытым ответом и рубрики

• Используйте открытые задания, когда нужны рассуждение, объяснение или метод. Задайте вопрос, на который нельзя ответить одним словом, и скажите ученикам, сколько баллов он стоит и чего ожидается, например: «Покажите решение и объясните».
• Рубрика описывает, как выглядит ответ на каждом балле. Пишите сверху: сначала лучший ответ, потом каждый нижний уровень, охватывая одни и те же элементы. Используйте наблюдаемые слова («указывает убыток числом»), а не расплывчатые («хорошо», «достаточно»).
• Проверьте рубрику: два проверяющих оценивают одни и те же пять ответов, затем сравнивают. Каждое расхождение показывает описание, которое нужно переписать. Заранее решите, как оценивать верный метод с арифметической ошибкой.

Компетентностные задания на практике

• Стройте блок: один стимул (прайс-лист, короткий текст, таблица результатов) и два-три вопроса, поднимающихся от поиска к применению и к решению или обоснованию. Крупные исследования часто дают один стимул с несколькими вопросами; вы можете сделать так же в малом масштабе.
• Держите нагрузку на чтение низкой. Если стимул длинный или содержит редкие слова, вы проверяете чтение вместе с предметом. Используйте местные, правдоподобные ситуации: рыночные цены, школьный участок, расписание автобусов, прилавки навруз-ярмарки.
• Проверьте, что ситуация необходима: уберите её и посмотрите, остаётся ли вопрос. Затем проверьте справедливость: достаточно ли каждый ученик знает об обстановке, чтобы ответить? (См. занятие 5.)

Закрытые задания, проверяющие больше, чем воспроизведение

Выбор ответа не обязательно означает память. Дайте короткую ситуацию, затем спросите о лучшем объяснении, следующем шаге или верном выводе и сделайте варианты разными линиями рассуждения. Например, покажите план честного опыта и спросите, что в нём не так, а в вариантах назовите разные проблемы. Ученикам нужно думать; тот, кто выучил определение, не справится.

Два предостережения. Во-первых, закрытые задания проверяют узнавание хорошего ответа, а не его создание, поэтому для объяснения оставляйте открытые задания. Во-вторых, хитрое задание — не глубокое: ловушки в формулировке, близкие варианты и двойные отрицания заставляют учеников ошибаться из-за чтения. Стремитесь к ясной основе и различимым вариантам, различия которых опираются на идею, которую вы преподавали. Если коллеге нужно три раза прочитать основу, перепишите её.

Как оценивать открытые ответы, чтобы два учителя соглашались

Большинство расхождений между проверяющими возникает из-за расплывчатых описаний, а не из-за небрежности. Перед проверкой выберите три-четыре образца ответов, явно заслуживающих разных баллов, и используйте их как опорные. Запишите наблюдаемыми словами, что показывает каждый. Проверяйте один вопрос во всех работах, закрыв имя, чтобы прежние ответы ученика не окрашивали последующие.

Заранее решите, что делать с типичными пограничными случаями: верный метод с арифметической ошибкой (зачёт по цепочке), верная мысль необычными словами или верный ответ без решения. Внесите решение в рубрику. Затем вместе с коллегой оцените пять ответов и обсудите каждое расхождение. Опубликованные задания крупных исследований сопровождаются указаниями по оцениванию и служат хорошими образцами того, как открытый ответ можно оценивать по чётким правилам.

Попробуйте завтра

• Возьмите одно закрытое задание последнего теста и перепишите варианты так, чтобы каждый был отдельной линией рассуждения.
• Выберите одно открытое задание, напишите рубрику на 3 балла наблюдаемыми словами и проверьте её на двух образцах ответов с коллегой.
• Сократите стимул в одном из заданий на треть и проверьте, что вопрос по-прежнему в нём нуждается.