Обнаружены ошибки в оценивании эссе в школах Массачусетса из-за сбоя в системе искусственного интеллекта
В Массачусетсе более 1,400 эссе, написанных студентами почти 200 школьных округов, были неправильно оценены в результате сбоя в системе оценки, основанной на искусственном интеллекте. Об этом сообщает NBC Boston. У некоторых изданий, которые должны были получить оценки в диапазоне от 1 до 7, была выставлена минимальная оценка «0», что вызывает серьезные опасения относительно надежности системы автоматического оценивающего инструмента.
Департамент начального и среднего образования Массачусетса подтвердил, что все затронутые эссе были переоценены, а округа получили соответствующие уведомления о найденных ошибках. Корректировка данных была завершена еще в августе. Однако новые результаты тестирования MCAS (Massachusetts Comprehensive Assessment System), опубликованные в конце последнего месяца, показали, что учебные дефициты, возникшие в период пандемии COVID-19, продолжают оставаться серьезной проблемой для учеников всех классов в штате.
Согласно заявлению DESE, проблема со scoring возникла в результате «временной технической неисправности в процессе оценки» и представляет собой всего лишь небольшую долю из примерно 750,000 эссе, оцененных в масштабах штата. В течение последних двух лет искусственный интеллект используется для автоматизированного оценивания тестов MCAS. При этом около 10% всех эссе впоследствии проверяются и переоцениваются людьми, чтобы обеспечить согласованность в оценивании.
Инцидент с оцениванием происходит на фоне недавнего решения жителей Массачусетса, которые подавляющим большинством голосов отклонили введение порогов успеваемости для получения диплома о среднем образовании. Практически 60% избирателей отклонили стандарт, который уже два десятилетия действовал в штате, что еще раз подчеркивает тревожные настроения в обществе по поводу качества образования.
Кроме того, в данный момент Совет по выпускным требованиям K-12 разрабатывает новые требования к получению диплома, которые могут привести к возвращению стандартизированных оценочных тестов в основных предметах для определения готовности учащихся к получению аттестата. В проекте рекомендаций Совета имеется положение о «конечных оценочных тестах», которые будут «разработаны, проведены и оценены государством, что способствует унификации стандартов по всему Массачусетсу».
Анализируя эту ситуацию, можно упомянуть, что использование искусственного интеллекта в сфере образования, хотя и имеет свои преимущества, также ставит перед нами значительные вызовы. По данным исследовательского центра EdTech, внедрение технологии оценки с использованием ИИ в образовательных системах должно сопровождаться строгими мерами контроля качества, чтобы избежать возможных ошибок в оценивании учащихся.
Таким образом, право на качественное образование и справедливую оценку результатов учеников остаются в центре внимания общественности и образовательных органов, особенно в условиях культурных и экономических изменений, вызванных пандемией.
