Другой курс ▾
Занятие 3. Анализ заданий: какой вопрос что мне говорит?
Цель. Вычислить долю учеников, верно выполнивших каждое задание, сравнить сильных и слабых и увидеть в неверных ответах заблуждения.
Когда тест прошёл плохо, первый порыв - смотреть на учеников. Анализ заданий просит посмотреть и на тест. Посчитав, сколько человек ответили верно, сравнив самых сильных и самых слабых и прочитав неверные ответы, вы различаете три ситуации: тема, которую вы хорошо преподали, тема, требующая ещё одной попытки, и вопрос, который никогда не был честным. Пятнадцати минут вручную достаточно, и они говорят, с чего начать следующий урок.
Ключевые идеи
По заданиям, а не только по ученикам
- Итоговый балл говорит об ученике. Столбец верных и неверных ответов по одному заданию говорит о преподавании и о самом вопросе.
- Анализ заданий - это взгляд вниз по каждому столбцу: сколько ответили верно, кто именно и что написали остальные.
- Для класса из 25 человек и 6 заданий это занимает около 15 минут вручную.
Трудность: доля верных ответов
- Трудность (лёгкость) = верно ответившие / все, кто выполнял задание x 100. 15 из 20 - это 75 процентов.
- Ориентир, а не закон: выше примерно 90 процентов задание лёгкое, можно двигаться дальше; ниже примерно 30 процентов - трудное, нужно присмотреться.
- Трудное задание не обязательно провал преподавания. Сначала спросите: изучалось ли это и понятен ли вопрос?
Сильные и слабые: различает ли задание?
- Разложите работы по общему баллу. Подсчитайте, сколько из лучших 6 и худших 6 учеников верно выполнили задание.
- Хорошее задание верно выполняет большинство сильных и меньше слабых. Если проваливаются и сильные, подозревайте сам вопрос или пробел в преподавании для всех.
- Если слабые отвечают верно, а сильные нет, проверьте ключ: ошибка в ключе встречается чаще, чем мы готовы признать.
Неверные ответы - информация
- В тестовом задании подсчитайте, сколько учеников выбрали каждый неверный вариант. Неверный вариант, выбранный многими, - это закономерность, а не случайное угадывание.
- Спросите, какое рассуждение приводит к такому ответу. 1/2 + 1/3 = 2/5 получается сложением числителей и знаменателей отдельно - заблуждение о том, что такое дроби.
- Для письменных работ разложите работы по стопкам по типу ошибки. Трёх стопок с числом в каждой достаточно, чтобы спланировать повторное объяснение.
Иллюстративная трудность заданий (% верных), образец проверочной
Три проверки, прежде чем винить учеников
Если одно задание дало очень низкий результат, задайте три вопроса по порядку. Это изучалось? Посмотрите план и учебник: ученик не ответит на то, чего раздел не касался. Это понятно? Прочитайте формулировку глазами ученика; длинные предложения, незнакомые слова или запутанный рисунок делают вопрос трудней, чем идея. Ключ верен? Ошибочный ключ встречается чаще, чем мы ожидаем, особенно когда вопросы скопированы из другого источника.
Лишь когда все три проверки пройдены, можно заключить, что сама идея не усвоена. Тогда неверные ответы становятся лучшим ориентиром: они говорят, что ученики думали вместо этого.
Неверные ответы, которые учат вас
Диагностическое тестовое задание пишется так, чтобы каждый неверный вариант соответствовал одному конкретному заблуждению. Для 1/2 + 1/3 варианты 2/5 (складывает числители и знаменатели), 2/6 (складывает числители, умножает знаменатели) и 5/6 (верно) указывают в разные стороны. Если большинство ошибившихся выбрало первый, вы знаете, что преподавать, и знаете это из ответа, а не из догадки.
Такие вопросы вы можете писать сами за десять минут: перечислите три ошибки, которые чаще всего видите по теме, и превратите каждую в вариант. Ведите тетрадь ошибок; одни и те же возвращаются каждый год, а банк вопросов на их основе улучшается с каждым использованием.
Примеры из класса
Популярное 2/5
Ситуация. В 6 классе в Самарканде 9 из 20 учеников выбирают 2/5 для 1/2 + 1/3, и лишь 6 выбирают 5/6. Дилноза не объясняет алгоритм заново. Она рисует половину и треть одной и той же полосы, спрашивает «а 2/5 вообще больше половины?» и даёт ученикам увидеть, что ответ слишком мал. Через три дня то же задание решают заметно лучше.
Вывод. Популярный неверный ответ - окно в мышление; рисунок может прямо оспорить идею.
Все провалили вопрос 6
Ситуация. Лишь 3 из 20 учеников решают длинную задачу на «дробь от дроби», и двое из троих не входят в число лучших. Жасур проводит три проверки. В разделе не изучалось; формулировка из 45 слов; ключ верен. Он исключает задание из оценок, записывает «изучить в следующем разделе» и не меняет план для класса.
Вывод. Очень трудное задание со слабой различающей способностью указывает на вопрос, а не на провал всех учеников.
Ошибочный ключ
Ситуация. Нодира, 7 класс в Ташкенте, замечает, что в задании 8 самые слабые справились лучше самых сильных. Она проверяет ключ и находит, что напечатала B вместо C. После исправления ключа задание ведёт себя нормально. Без сравнения сильных и слабых она написала бы заметку о «запутавшихся умных учениках».
Вывод. Если сильные проваливаются, а слабые справляются, сначала проверьте ключ.
Типичные ошибки
- Заключать «не выучили», не проверив, изучалось ли, понятно ли и верен ли ключ.
- Смотреть только на процент и не замечать, какой неверный ответ выбран.
- Считать границы 90 и 30 процентов строгими законами, а не ориентирами.
- Использовать анализ заданий для ранжирования учеников, а не для улучшения преподавания.
Анализ заданий вручную
- В парах (15 мин): используйте таблицу результатов из сборника (20 учеников, 6 заданий). Подсчитайте верные ответы в каждом столбце и вычислите трудность каждого задания.
- В парах (10 мин): работы уже упорядочены по итоговому баллу. По каждому заданию подсчитайте верные ответы у лучших 6 и худших 6 учеников.
- Индивидуально (10 мин): по заданию 4 подсчитайте, сколько учеников выбрали каждый вариант от A до D, и запишите рассуждение, ведущее к популярному неверному ответу.
- Группой (15 мин): выберите задание, которое тревожит больше всего, и решите, что проверить первым. Особенно посмотрите на задание 6.
Фасилитатор проведёт вас через это задание на самом занятии.
Вопросы для обсуждения
- Какое задание оказалось самым трудным, а какое самым лёгким? Вы бы преподавали их по-разному, исходя из этих данных?
- Что сказал популярный неверный ответ в задании 4 такого, чего не сказал процент?
- Задание 6 оказалось трудным даже для сильных. Назовите три вещи, которые нужно проверить, прежде чем заключить, что ученики не научились.
Подумайте
- Какое задание в моём последнем тесте провалили почти все и спрашивал(а) ли я почему?
- Могут ли некоторые мои вопросы быть непонятными или недостаточно отработанными?
- С каким заблуждением в моём предмете я встречаюсь снова и снова?
Попробуйте завтра
- После следующей короткой проверочной подсчитайте верные ответы по каждому заданию и напишите рядом трудность.
- Для самого трудного задания проведите три проверки (изучалось, понятно, ключ верен) и запишите результат.
- Составьте для своего предмета один тестовый вопрос с тремя неверными вариантами, каждый из которых связан с частой ошибкой.
Дополнительные материалы и ссылки
Читайте каждое задание тремя способами: сколько ответили верно, лучше ли справились сильные, чем слабые, и что показывают неверные ответы.