Другой курс ▾
Занятие 3. Проверка результатов ИИ на ошибки и предвзятость
Цель. Проверять любой созданный ИИ материал по схеме из четырёх пунктов, записывать найденное в журнал проверки и решать: исправить, заменить или отказаться.
Проверка превращает рискованный черновик в пригодный материал, и она должна быть быстрой, иначе её не будут делать. Учителя, которые хорошо проверяют, не читают всё с одинаковым усилием: они сначала проверяют самые дешёвые и самые вредные проблемы и соразмеряют усилия со ставками. Это занятие даёт короткий порядок проверок, показывает, как предвзятость выглядит в материалах для наших школ, и помогает решить, когда черновик не стоит спасать.
Ключевые идеи
Почему гладкий ответ может быть неверным
- Эти инструменты создают текст, который звучит правдоподобно, а не проверенный. Неверное число или выдуманный источник могут стоять в безупречно написанном абзаце.
- Типичные проблемы для наших классов: неверные расчёты в ключах, перепутанные факты об Узбекистане, содержание за пределами государственного учебника и несуществующие ссылки.
- Качество может отличаться по языкам: в узбекском и русском результате бывают странные термины и дословные переводы. Прочитайте вслух.
Проверка по четырём пунктам
- Факты: пересчитайте каждое число, сверьте имена, даты и места с учебником или вторым надёжным источником. Откройте любой источник, на который ссылается инструмент.
- Соответствие: подходит ли материал цели, разделу учебника, уровню учеников, языку обучения и 45 минутам?
- Справедливость и Язык: кто пропущен или показан стереотипно и звучит ли текст естественно и уважительно по-узбекски или по-русски?
Распознавайте предвзятость в учебных материалах
- Ищите закономерности, а не отдельные слова: профессиональные роли только у мужчин, женщины только дома, только городская или богатая среда, один регион или одна национальность как норма.
- Исправляйте новым запросом («используй сбалансированные роли, сельскую и городскую среду, имена из разных регионов») и снова читайте новую версию: правки могут создать новые проблемы.
- Ваше суждение важнее всего: вы знаете учеников и то, из-за чего ребёнок может почувствовать себя незамеченным.
Попробуйте на ближайших уроках
- Ведите журнал проверки для трёх материалов, сделанных с помощью ИИ: что было неверно, какая проверка это нашла, сколько времени заняла проверка. Правило: если не можете проверить, не используете. Запас: вариант из учебника.
- Свидетельство: сам журнал с числом проблем по проверкам (Факты, Соответствие, Справедливость, Язык).
- Свидетельство: одно изменение, видимое ученикам, например исправленный ключ, и 5-минутная заметка о том, сработал ли исправленный материал в классе.
Четыре проверки вкратце
| Проверка | Спросите | Типичная находка |
|---|---|---|
| Факты | Это верно? | Неверный расчёт, перепутанное место, выдуманный источник |
| Соответствие | Это для моего класса? | Алгебра в разделе о дробях, слишком длинно |
| Справедливость | Кого не хватает? | Стереотипные роли |
| Язык | Звучит ли естественно? | Дословный перевод |
Порядок проверок
Десятиминутный порядок проверок
Начните с того, что дешевле всего проверить и дороже всего стоит при ошибке: каждое число и каждый ключ ответов. Пересчитайте их сами, а не спрашивая инструмент, верны ли они. Затем сверьте имена, места и даты с учебником и откройте любой источник, на который ссылается инструмент; если найти не можете, считайте его непроверенным.
После этого проверьте соответствие цели и 45 минутам, один раз прочитайте на справедливость и вслух по-узбекски или по-русски на естественность формулировок. Соразмеряйте усилия со ставками: тест, ключ или объявление родителям заслуживают полной проверки, подборка идей — быстрого чтения. Если проверка требует больше времени, чем написание, откажитесь от черновика.
Как предвзятость выглядит в наших материалах
Многие инструменты учатся на текстах, которые в основном происходят из других мест, поэтому их привычные картины могут не совпадать с нашими классами: семья с машиной и планшетом, городская квартира, снежная зима, имена из одного региона. Смотрите, кого не хватает: сельских учеников, учеников, чей домашний язык не язык обучения, детей из разных регионов, детей с инвалидностью.
Смотрите и на роли: кто врач, водитель, учитель, помощник дома? Один странный пример — недосмотр, а закономерность — предвзятость. Найдя её, дайте инструменту конкретную правку, снова прочитайте новую версию и окончательно выберите имена и обстановку сами, ведь вы знаете, какие примеры позволят вашим ученикам почувствовать, что их видят.
Примеры из класса
Источника не оказалось
Ситуация. Дилноза преподаёт историю в 6 классе в Самарканде. Инструмент написал викторину из десяти вопросов и закончил названием книги и номером страницы. Три минуты она искала в списке школьной библиотеки и в учебнике и ничего не нашла. Она убрала строку, сверила каждый ответ с учебником и заменила два вопроса, которых в учебнике нет.
Вывод. Источник, который нельзя найти, непроверен, как бы точно он ни выглядел.
У всех есть машина
Ситуация. Малика преподаёт в 4 классе русской школы в Ташкенте. В наборе текстовых задач предполагалось, что каждая семья ездит в супермаркет на машине и имеет планшет. Она попросила сельскую и городскую обстановку, цены базара и расстояния пешком, потом заново прочитала новый набор и заменила одно имя, которое не подошло её классу.
Вывод. Исправление предвзятости — это новый запрос и новое прочтение, а окончательное суждение за учителем.
Деревянное объявление
Ситуация. Азиз попросил инструмент перевести на узбекский объявление о школьной поездке для родителей. Текст был верным, но звучал как юридический бланк. Он прочитал вслух, быстро показал коллеге, хорошо пишущему по-узбекски, и переписал три предложения более тёплыми словами. Всего десять минут, и он счёл это лучше, чем писать с нуля.
Вывод. Проверка языка касается тона и естественности, а не только правильности.
Типичные ошибки
- Спрашивать инструмент «это верно?» вместо собственной проверки.
- Проверять орфографию и оформление, но не числа.
- Исправить один стереотип и не прочитать новую версию на новые проблемы.
- Использовать черновик, который проверять дольше, чем писать.
Найдите спрятанные проблемы
- Самостоятельно (10 мин.): прочитайте лист в стиле ИИ из набора. Примените четыре проверки и обведите каждую проблему. Устройство не нужно: проверяйте головой и ручкой.
- В парах (10 мин.): сравните, затем заполните журнал проверки: проблема, какая проверка её нашла и что вы сделаете (исправить, заменить или отказаться).
- В группах по четыре (10 мин.): перепишите два самых плохих пункта так, чтобы их можно было использовать, и напишите уточняющий запрос для исправления пункта с предвзятостью.
- Группой (10 мин.): оцените время проверки. Оправдана ли экономия или версия из учебника была бы быстрее? Договоритесь об одном правиле решения для вашей школы.
Фасилитатор проведёт вас через это задание на самом занятии.
Вопросы для обсуждения
- Какую проблему было проще всего пропустить и почему?
- Сколько времени заняла проверка по сравнению с самостоятельным написанием шести пунктов?
- Каков ваш личный предел: когда вы останавливаетесь и берёте вариант из учебника?
Подумайте
- Какую из четырёх проверок вы обычно пропускаете, когда спешите?
- Случалось ли вам использовать материал из любого источника, в котором позже нашли ошибку?
- Кто в вашей школе мог бы стать для вас вторым взглядом?
Попробуйте завтра
- Выберите один черновик ИИ и пересчитайте каждое число, прежде чем читать что-либо ещё.
- Посчитайте роли и обстановки в одном листе и запишите, кого не хватает.
- Засеките время одной полной проверки и запишите минуты в журнал проверки.
Дополнительные материалы и ссылки
Каждый раз проверяйте Факты, Соответствие, Справедливость и Язык; записывайте найденное; если не можете проверить, не используйте.