Занятие 4. Модерация: согласованные оценки между учителями

Что такое модерация и зачем она ученикам

• Модерация — это когда учителя сравнивают свои оценки одних и тех же работ учеников по общим критериям и договариваются, как выглядит каждый уровень.
• Без неё результат ученика может зависеть от того, какой учитель проверяет. Два класса одной школы или две школы в Фергане могут одними словами обозначать разные стандарты.
• Это ещё и профессиональное обучение: учителя узнают, что значит «хорошо» в их предмете, рассматривая реальные работы вместе.

Почему два добросовестных учителя всё равно расходятся

• Одни учителя строже, другие мягче, поэтому одна работа получает разные оценки.
• Аккуратный почерк или длинный ответ могут завысить оценку при слабом содержании (эффект ореола). Слабую работу, проверенную сразу после очень сильной, могут занизить.
• Знание ученика («Жасур всегда старается») и собственное прочтение критерия тоже меняют оценку. Это не плохое преподавание, а норма, и именно поэтому мы проводим модерацию.

Встреча-модерация в шесть шагов

• 1. Каждый самостоятельно оценивает одни и те же четыре-пять анонимных работ по общей рубрике. 2. Оценки записываются в одну таблицу, чтобы все их видели.
• 3. Обсуждайте только работы, где оценки расходятся на уровень и более. Каждый учитель показывает слова в работе и слова в рубрике, подтверждающие его оценку.
• 4. Согласуйте оценку и выберите эталонный образец для каждого уровня. 5. Отметьте слова рубрики, которые нужно переписать. 6. Позже оцените новую работу самостоятельно и проверьте, что теперь вы согласны.

Сделайте её лёгкой, регулярной и доброжелательной

• Для начала достаточно двух учителей одной параллели. Возьмите по пять работ из каждого класса без имён: одну сильную, одну слабую и три средних.
• Стремитесь к согласию в пределах одного уровня, а не к одинаковым оценкам. Спорьте о свидетельствах в работе, никогда об ученике или учителе.
• Храните эталоны в папке и записывайте решения в нескольких строках. Встреча на 30–40 минут раз в четверть лучше долгой встречи раз в год.

Почему расхождения нормальны

Оценивание сочинения или решения не похоже на чтение термометра. Каждый из нас носит в себе личный образ «хорошего», сложившийся из собственной учёбы и собственных классов. Когда слова рубрики открыты («ясно», «хорошо развито»), пробелы заполняет личный образ. Поэтому два внимательных учителя могут разойтись на целый уровень, и одной рубрики недостаточно.

Некоторые эффекты хорошо известны. Аккуратный почерк и объём могут завысить оценку (эффект ореола). Слабая работа, проверенная после очень сильной, может казаться ещё слабее. Знание, что ученик всегда старается, может поднять оценку, а знание, что другой часто небрежен, — снизить. Проверка без имён и каждый раз в новом порядке уменьшает все эти эффекты. Цель не убрать суждение, а сделать его общим.

Что происходит на хорошей встрече-модерации

Самый сильный момент — пауза после того, как оценки записаны, но до того, как кто-то заговорил. Все уже зафиксировали позицию. Затем ведущий выбирает работу с расхождением и просит каждого назвать предложение в работе и слова рубрики, подтверждающие его оценку. Спорить о свидетельствах безопасно: оценивают не людей, а работу.

Согласие рождается в разговоре, а не в голосовании. Когда группа решила оценку по каждой работе, сохраните работы как эталоны для каждого уровня и отметьте слова рубрики, вызвавшие трудности. В следующий раз новые учителя или новые ученики смогут начать с эталонов. Стремитесь к согласию в пределах одного уровня и проверьте через несколько недель, оценив новую работу самостоятельно. Если вы работаете один, коллега из другой школы или повторная оценка своих работ через неделю дают уменьшенный вариант той же пользы.

Попробуйте завтра

• Пригласите одного коллегу самостоятельно оценить пять анонимных работ из ваших классов, затем сравнивайте 30 минут.
• Оцените следующий комплект, не глядя на имена и в ином порядке, чем обычно.
• Сохраните в папке по одной эталонной работе на каждый уровень с пометкой, почему она подходит.