Ошибка AI-системы оценки эссе MCAS приводит к снижению оценок учащихся в сотнях округов: отчет

Ошибки в оценке экзаменов MCAS в Массачусетсе: последствия и будущее оценки учащихся

В Массачусетсе студенты из почти 200 школьных округов столкнулись с серьезной проблемой: около 1,400 эссе, представленных на Massachusetts Comprehensive Assessment System (MCAS), были неправильно оценены из-за сбоя в системе оценки, основанной на искусственном интеллекте. Этот инцидент вызывает обеспокоенность и поднимает вопросы о надежности технологий в сфере образования.

Сообщения местных СМИ указывают на то, что некоторые эссе получили нулевую оценку вместо ожидаемых 6 баллов по шкале от 1 до 7. Департамент начального и среднего образования Массачусетса (DESE) пояснил, что все работы были повторно оценены, а затронутые округа были проинформированы о произошедшем. Корректировка данных была завершена в прошлом месяце. В публичном отчете о результатах MCAS было заявлено, что недостатки в обучении, проявившиеся в эпоху пандемии, остаются серьёзной проблемой для учащихся на всех уровнях обучения.

DESE также отметило, что ошибки в оценивании представляют собой лишь незначительный процент от общего числа эссе, оцененных в 750,000 по всему штату. Искусственный интеллект используется в системе оценки MCAS на протяжении последних двух лет, причём примерно 10% эссе пересматриваются и повторно оцениваются педагогами для обеспечения согласованности.

Этот инцидент произошёл на фоне общественного недовольства: жители Массачусетса многими голосами отказались от внедрения пороговых требований на тестах MCAS в качестве условия для получения аттестата о среднем образовании. Почти 60% избирателей в ходе голосования по инициативе, проведённому в прошлом году, заблокировали стандарт, действовавший в штате на протяжении двух десятилетий.

Сейчас, когда Государственный совет по выпуску из K-12 разрабатывает новые требования к окончанию обучения, также обсуждается возможность возвращения стандартизированных «экзаменов по окончанию курса» в основных предметах. Этот шаг может помочь определить, соответствует ли учащийся требованиям для получения аттестата о среднем образовании.

Предложения Совета включают пункт о «экзаменах по окончанию курса», которые будут «разработаны, administered и оценены на государственном уровне, способствуя единообразным стандартам по всему штату». Эксперты в области образования подчеркивают, что подобные меры необходимы для повышения качества образовательного процесса и исправления проблем, выявленных в результате пандемии.

Ситуация с ошибками в оценивании подчеркивает важность надежного контроля качества исследований в образовательной системе, особенно в свете активного внедрения технологий в этот процесс. Около 15% учащихся Массачусетса с трудом справляются с тестами, что говорит о необходимости пересмотра методов оценки и внедрения более строгих стандартов.

Данный вопрос должен оставаться в центре внимания как образовательных властей, так и общественности, чтобы обеспечить более качественное и справедливое образование для всех студентов.