Другой курс ▾
Занятие 1. Что на самом деле измеряют ориентиры и тесты
Цель. Простыми словами описать, чего требуют от учеников стандарт, тест национального типа и рамки PISA, TIMSS и PIRLS, и классифицировать задания по содержанию и уровню мышления (знать, применять, рассуждать).
Коллеги говорят о PISA, TIMSS и национальных тестах так, будто это одна загадочная вещь. Для вашего класса полезнее простой вопрос: что эти документы на самом деле просят делать учеников и просит ли мой тест то же самое на уровне моего стандарта? Это занятие помогает читать рамки как ориентиры для проектирования, видеть мышление за заданием и избегать двух ловушек: копирования внешнего вида теста без его требований и восприятия теста как приговора вашему классу.
Ключевые идеи
Три точки отсчёта
- Стандарт говорит, что ученики должны знать и уметь. Тест национального типа, например вариант в стиле ДТМ (обычно составляется централизованно, много закрытых заданий и жёсткий лимит времени; сверяйтесь с действующей официальной спецификацией), берёт выборку из него в одном формате. Международные исследования берут выборку иначе.
- PISA (для 15-летних) описывает грамотность в чтении, математике и естествознании: использование знаний для понимания и решения жизненных задач. TIMSS (4 и 8 классы) описывает содержательные области математики и естествознания и три вида мышления: знание, применение, рассуждение. PIRLS (чтение в 4 классе) описывает две цели чтения и четыре процесса понимания.
- Не нужно гнаться за каждым тестом. Прочитайте каждую рамку один раз и берите только идеи, подходящие вашему стандарту и вашим ученикам.
Знать, применять, рассуждать
- В этом курсе мы делим задания на три уровня. ЗНАТЬ: вспомнить факт, правило или приём. ПРИМЕНЯТЬ: использовать знание в знакомой ситуации. РАССУЖДАТЬ: оценить, обосновать, сравнить или решить в новой ситуации. Это простое изложение идеи уровней мышления в рамках.
- Уровень зависит от того, что должен сделать ученик, а не от того, насколько трудной кажется тема. Вспомнить трудную дату — это всё равно ЗНАТЬ; объяснить простой график может быть РАССУЖДАТЬ.
- В хорошем тесте есть все три. Слишком много ЗНАТЬ поощряет только память; слишком много РАССУЖДАТЬ может скрыть, знают ли ученики основы.
Компетентностные задания простыми словами
- Компетентностное задание даёт реалистичную ситуацию (стимул: короткий текст, таблица, прайс-лист или график) и просит учеников применить знания и умения, чтобы ответить на вопрос о ней.
- Рассказ должен быть нужен. Проверка: уберите рассказ. Если вопрос остаётся понятным без изменений, рассказ был лишь украшением, а задание — обычным упражнением.
- Такие задания часто требуют выбрать, какую информацию использовать, сделать несколько шагов или объяснить решение. Они занимают больше времени, поэтому используйте их немного и оценивайте хорошо.
Что результаты могут и не могут сообщить
- Крупные международные исследования описывают группы учеников и системы по выборкам. Это не отчёт о вашем классе или об одном ребёнке, и ими нельзя ранжировать коллег.
- Этот курс не делает утверждений о результатах какой-либо страны. Используйте рамки как ориентиры для проектирования хороших заданий, а не как турнирные таблицы.
- Самый полезный вопрос для вас: просят ли мои тесты учеников делать то, что сказано в стандарте, на том уровне, который там указан?
Три уровня мышления в этом курсе
Как учителю читать рамку
Рамка — это рецепт, а не результат. В ней сказано, какие содержательные области охватывает тест, какие виды мышления он требует, сколько заданий каждого вида будет и как они пишутся. Например, TIMSS называет содержательные области для каждого класса и три когнитивные области. PIRLS называет цели чтения и процессы понимания. PISA описывает грамотность в чтении, математике и естествознании как использование знаний в реальных ситуациях.
Вам не нужны все 200 страниц. Прочитайте введение и страницу со списком категорий, затем выберите две-три идеи, подходящие вашему стандарту: например, ученик должен объяснять, а не только утверждать, или текст читают с определённой целью. Запишите их на карточку у рабочего стола. Ваш тест становится лучше, когда он заимствует идеи, а не копирует оформление.
От глаголов к заданиям
Самый быстрый способ проверить согласованность — по глаголам. Возьмите один результат из стандарта, например «сравнить две дроби и обосновать выбор». «Сравнить» и «обосновать» — это не воспроизведение. Задание «Какая дробь больше?» проверяет часть глагола; задание с добавкой «Объясните, как вы это узнали» проверяет весь. Именно так рамки разделяют знание, применение и рассуждение.
Сделайте это для каждого результата: подчеркните глагол, спросите, что ученик напишет или сделает, чтобы это показать, и проверьте, даёт ли ваш тест такую возможность. Потом посчитайте. Если глаголы требуют рассуждения, а 90 процентов баллов идёт на воспроизведение, тест говорит одно, стандарт другое, и ученики по тесту узнают, что действительно ценится.
Примеры из класса
Одна тема, разные требования
Ситуация. Дилноза преподаёт в 8 классе в Самарканде и даёт два вопроса о процентах. Вопрос 1: «Сколько составляют 25 процентов от 80?» Вопрос 2: «В одном магазине пальто за 80 000 сумов продаётся со скидкой 25 процентов, в другом скидка 20 000 сумов. Что выгоднее? Объясните». На вопрос 1 верно отвечают 22 из 24 учеников, на вопрос 2 — только 9.
Вывод. Тема одна, а уровень мышления разный; тест с одним вопросом 1 скрыл бы, чего ученики пока не умеют.
История, которая была просто украшением
Ситуация. Жасур пишет задание для 7 класса: «Азиз пошёл на базар в Фергане. Он купил 3 кг помидоров по 6 000 сумов за кг. Сколько составляет 3 x 6 000?» Коллега убирает историю, и вопрос не меняется. Жасур переписывает задание с двумя ценами на табличке и спрашивает, на каком прилавке за 20 000 сумов дадут больше помидоров, так что табличка нужна для ответа.
Вывод. В компетентностном задании ситуация должна быть необходимой, иначе это обычное упражнение с украшением.
Рамка без погони за баллом
Ситуация. В школе в Бухаре завуч просит Малику подготовить 9 класс к международному исследованию. Малика вместо этого читает открытую рамку с двумя коллегами, выбирает идею о том, что ученики должны объяснять с опорой на доказательства, и добавляет по одному вопросу на объяснение в каждую итоговую работу. Она говорит завучу, что использует рамку для улучшения тестов, а не для прогноза результатов.
Вывод. Рамки полезнее всего как ориентиры для проектирования собственного оценивания, а не как турнирные таблицы.
Типичные ошибки
- Копировать оформление теста национального типа и называть его согласованным, когда все задания на воспроизведение.
- Считать, что PISA, TIMSS и PIRLS измеряют одно и то же и одного набора для тренировки хватит.
- Определять уровень задания по трудности темы, а не по тому, что должен сделать ученик.
- Воспринимать результаты крупного исследования как приговор вашему классу или одному ребёнку.
Рассортируйте задания, затем проверьте свой тест
- Тройки (10 мин.): откройте сборник упражнений. Прочитайте страницу «рамки простыми словами» и 8 образцов заданий. Каждый читает вслух 2–3 задания и говорит, что должен сделать ученик.
- Тройки (15 мин.): рассортируйте 8 заданий по уровню мышления (знать, применять, рассуждать) и по формату (закрытое или открытое). Где не согласны, запишите действие ученика одним глаголом, прежде чем решать.
- Вся группа (10 мин.): сравните с примечанием с ответами в сборнике. Обсудите два пограничных задания и сопоставьте задания 5, 6 и 7 с процессами PIRLS, а задания 1, 2 и 4 — с видами мышления TIMSS.
- Пары (10 мин.): возьмите свой последний тест (без имён). Подсчитайте задания по уровням в таблице сборника. Какого уровня не хватает? Совпадает ли это с глаголами вашего стандарта?
- Второе короткое задание, пары (10 мин.): перепишите одно задание уровня ЗНАТЬ из своего теста как задание на ПРИМЕНЕНИЕ с местной ситуацией, а одно — как задание на РАССУЖДЕНИЕ с решением и причиной. Обменяйтесь с другой парой и примените проверку «уберите рассказ».
- Самостоятельно (10 мин.): запишите школьное задание из сборника и договоритесь с коллегой, когда вы его выполните.
Фасилитатор проведёт вас через это задание на самом занятии.
Вопросы для обсуждения
- Какое задание было труднее всего классифицировать и что подсказало действие ученика?
- Какого уровня не хватало или было мало в вашем тесте и почему, по-вашему, так получилось?
- Какое переписанное задание всё ещё похоже на украшение и как сделать ситуацию необходимой для ответа?
Подумайте
- На какие из моих обычных заданий ученик ответит верно, не понимая?
- Какой глагол из моего стандарта я почти никогда не проверяю?
- Какой миф о национальных или международных тестах я слышал в учительской и что сказала бы рамка?
Попробуйте завтра
- Выберите один результат стандарта, подчеркните его глагол и напишите задание, которое его покажет.
- Подсчитайте задания последнего теста по уровням знать, применять и рассуждать и запишите недостающий уровень.
- Перепишите одно задание так, чтобы ситуация была необходима для ответа, и попросите коллегу провести проверку «уберите рассказ».
Дополнительные материалы и ссылки
Читайте стандарт и рамки простыми словами, сортируйте задания по тому, что должен делать ученик, и стройте тесты со всеми тремя уровнями.