Автор Фредди Уиттакер
⌚ 2мин
Регулятор экзаменов Ofqual объявляет конкурс, чтобы узнать, могут ли экзамены быть проведены с искусственным интеллектом.
В опубликованном 9 января блоге организация заявила, что хочет «понять, может ли ИИ играть роль в выставлении отметок», и «особенно интересуется, может ли быть использование ИИ в качестве второго проверяющего или в качестве способа мониторинга выставления отметок, чтобы помочь улучшить эту процедуру».
Объявление следует за предупреждениями о том, что продолжающийся кризис набора и удержания учителей влияет на набор экзаменаторов, а также после того, как в отчете Ofqual обнаружилось, что большое количество экзаменаторов недовольны системой, используемой для стандартизации выставления их отметок.
В своем блоге Бет Блэк, директор по исследованиям и анализу Ofqual, сказала, что организация будет проводить исследования, в том числе «соревнование ИИ».
Оно будет включать более ранние человеческие маркеры, отмечающие несколько тысяч студенческих эссе несколько раз. Затем ответы будут использоваться для проведения конкурса «отдельных лиц и организаций, обладающих опытом в области ИИ», с тем чтобы попытаться обучить систему ИИ для отметки «похожим на обучающий набор».
«Затем мы можем протестировать эти системы ИИ по другому набору эссе (для которых мы знаем оценки, а системы ИИ - нет). Мы очень надеемся, что этот конкурс поможет стимулировать и определить самые лучшие практики в этой области», - сказал Блэк.
«Результаты этого конкурса помогут нам провести дальнейшую последующую исследовательскую работу - например, моделирование воздействия ИИ как второго маркера или как системы мониторинга маркеров».
Это не первый случай использования ИИ в выставлении отметок на экзаменах. Международная экзаменационная комиссия Cambridge Assessment English уже создала два авто-маркера для письменных и устных тестов, и Пирсон рассмотрел возможность использования искусственного интеллекта для оценки университетских экзаменов в США. Тем не менее, это, как полагают, первый раз, когда идея серьезно рассматривается для экзаменов в английских школах.
Блэк настаивала на том, что Ofqual уже исследовал искусственный интеллект в выставлении отметок, но сказала, что организация считает, что «важно предпринять некоторые первые шаги в этом направлении в Англии, начав это экспериментальное исследование».
«Если есть реальные потенциальные улучшения, способы, которые могут улучшить качество выставления отметок, конечно, мы хотим знать, поэтому мы можем поощрять систему образования к безопасному внедрению такой практики.
«Точно так же мы хотим иметь глубокое понимание потенциальных рисков при использовании таких технологий в наших экзаменах с высокими ставками».
Ofqual сейчас ищет школы, которые могут предоставить ответы учеников на эссе на конкретный прошлые вопросы в пробных тестах.
Взамен школам будут даваться экзаменационные оценки и аннотации.