Нейросеть YandexGPT ускорила проверку работ на олимпиаде для школьников в три раза

На турнире им. М. В. Ломоносова, одной из старейших олимпиад для школьников в России, впервые применили искусственный интеллект для проверки более 35 000 работ по физике, химии и астрономии. Использование нейросети YandexGPT позволило сократить процесс оценки с трех месяцев до одного, при этом качество оставалось на высоком уровне.

Разработчики Яндекса в сотрудничестве с экспертами Физтеха обучили YandexGPT определять соответствие ответов критериям оценки. Если ответ не соответствовал необходимым требованиям, нейросеть выставляла ноль баллов. Такой подход позволил экспертам сосредоточиться на более высоких оценках и ускорить процесс выдачи итоговых результатов.

После ручной проверки части решений было установлено, что точность работы алгоритма сохраняется на уровне 95%, соответствуя показателям предыдущих лет. Участники турнира, который проводится с 1978 года, смогли получить свои результаты быстрее, а эксперты больше не были вынуждены проверять все ответы вручную.

Эксперимент по внедрению нейросети в процесс оценки работ на олимпиаде признан успешным. В случае необходимости, участники могут подавать апелляции, и количество таких запросов осталось на уровне предыдущего года, что свидетельствует о высоком качестве проверки. В будущем организаторы планируют применять YandexGPT и на других олимпиадах с онлайн-турами, что позволит расширить формат заданий и улучшить процесс оценки.

]]>