На школьной олимпиаде. Нейросеть в 3 раза ускорила проверку работ по физике, химии и астрономии

На Турнире им. М. В. Ломоносова — одной из старейших и самых масштабных олимпиад для школьников, которая проводится с 1978 года, — впервые применили искусственный интеллект для проверки 35 000 ответов. Для эксперимента выбрали три естественнонаучные дисциплины: физику, химию и астрономию.

Разработчики Яндекса вместе с экспертами Физтеха научили YandexGPT определять, соответствует ли ответ критериям оценки. Если нейросеть не находила в работе необходимых соответствий, то выставляла ноль баллов. Такая автоматическая проверка позволила экспертам уделить больше внимания работам, набравшим больше баллов. Чтобы убедиться в точности работы алгоритма, эксперты перепроверили часть оцененных нейросетью работ. Результаты показали, что корректность оценки соответствует уровню предыдущих лет — 95%.

Применение YandexGPT позволило сократить этап оценки работ с трех месяцев до одного, сохранив качество проверки на прежнем уровне. В итоге участники быстрее получили результаты, а экспертам МФТИ не пришлось проверять все ответы вручную.

Изображение на обложке: freepik