Летом 2023 года начались первые обсуждения о возможности замены экспертов ЕГЭ искусственным интеллектом при проверке тестовых и творческих заданий единого государственного экзамена.
Одна из онлайн-школ сообщила, что их чат-бот, основанный на ChatGPT, готов к интеграции в систему оценки ответов ЕГЭ по английскому языку.
Результаты слепых тестирований показали, что чат-бот оценивает отдельные критерии и аспекты ответов не хуже, чем эксперт ЕГЭ, в 68% случаев. В 61% случаев он предоставляет качественную аргументацию для выставленных оценок, объясняя причины снижения баллов. Обучение чат-бота продолжается.
Мало кто знает, что искусственный интеллект участвует в проверке реальных работ выпускников на ЕГЭ с 2019 года. 20 ноября 2019 года руководитель Рособрнадзора Сергей Кравцов дал подробное интервью «Известиям», в котором рассказал о том, как ИИ в экспериментальном режиме помогает выявлять нарушения на ЕГЭ, проводя качественный анализ почерка:
«В прошлом году, в рамках эксперимента по отдельным предметам, мы начали использовать возможности специальной программы, можно сказать, прообраза системы искусственного интеллекта. С помощью этой программы после всех экзаменов автоматически был проведён анализ ответов выпускников, написанных по различным предметам ЕГЭ, чтобы определить, писал ли несколько работ один и тот же участник. Из 700 тысяч работ только 75 вызвали подозрения. Эти работы были из разных регионов. Мы передали их на почерковедческую экспертизу, и по 11 работам подозрения подтвердились. Рособнадзор на днях направил эти материалы в правоохранительные органы для проведения соответствующих мероприятий».
Как ИИ следит за списыванием на ЕГЭ
Видеонаблюдение на ЕГЭ ведётся с 2014 года. До 2012 года никакой системы видеонаблюдения на ЕГЭ не было, она появилась на экзаменах после выборов президента РФ, которые состоялись 4 марта 2012 года. Именно эти выборы ознаменовались установкой видеокамер на большинстве избирательных участков страны. Всю инфраструктуру, задействованную на выборах, решено было использовать для обеспечения прозрачности государственной итоговой аттестации школьников.
С этого момента началась массовая установка видеооборудования по всей стране. Качество видеоизображения с каждым годом становилось лучше, а в 2020 году запустили специальный алгоритм, анализирующий поведенческие реакции участников ЕГЭ. Он анализирует последовательность изображений, которые поступают с видеокамер в режиме реального времени или из архивных записей, и находит среди них возможные нарушения: использование шпаргалок, телефона и других девайсов.
В своём официальном блоге «Ростелеком» рассказал, как обучался алгоритм:
«Чтобы алгоритм точно распознавал поведение участников ЕГЭ и корректно фиксировала нарушения, его нужно было обучить на большом массиве данных. Что мы и сделали, собрав видеозаписи с уже зарегистрированными нарушениями на экзаменах за 2018–2019 годы.
Процесс обучения состоял из нескольких этапов:
На первом видеозаписи прогонялись через алгоритм детектирования людей с использованием нейросети Yolo. В результате получалось видео с маркированными участками, где люди находились в течение долгого времени. Это было нужно, чтобы отсечь преподавателей, которые ходят по коридорам, например. Каждому региону с человеком присваивался идентификатор, и обработанное видео с отмеченными регионами и идентификаторами сохранялось.
Затем это видео просматривал человек, который отмечал как можно более точно моменты начала и конца нарушения (если оно, конечно, было), а также идентификаторы «нарушителей». Также сохранялись моменты отсутствия нарушений как примеры нормального поведения, которые тоже нужны для обучения алгоритма. Так мы выявили еще и типичные нарушения — использование шпаргалок и телефонов, фотографирование материалов.Нам очень помогла открытая библиотека OpenPose, которая используется для определения положения людей в кадре, их поз и координат ключевых точек, относящихся к разным частям тела.
Первая версия алгоритма основывалась на использовании классификатора RandomForest, который был обучен на данных, полученных от OpenPose. Однако у этого подхода имелся значительный недостаток: большая часть потенциально полезной информации просто игнорировалась. Например, нельзя было определить, что именно держит человек в руке — ручку или шпаргалку.
В 2020 году компания «Ростелеком» провела исследования, направленные на улучшение работы алгоритма с применением нейросетевых технологий в области распознавания человеческой активности, используя архитектуры SlowFast, I3D и C3D.
На сегодняшний день технология видеоаналитики позволяет отслеживать видеопоток из аудитории в реальном времени, а между экзаменами — анализировать архивные записи. Для сравнения: один наблюдатель может следить максимум за четырьмя аудиториями одновременно, в то время как алгоритм способен обрабатывать видео из более чем 2000 аудиторий в течение одного экзаменационного дня.
В будущем использование искусственного интеллекта на экзаменах может полностью исключить человеческий фактор, оставив онлайн-наблюдателей только для проверки нарушений, выявленных нейросетью. В 2022 году «машинное зрение» зафиксировало почти 12 тысяч нарушений, однако не все из них были подтверждены после проверки.
Аналитики РБК прогнозируют, что в обсуждении будущего ЕГЭ ставится цель — 2030 год. Именно к этому сроку в России планируется реализация проекта «Цифровая экономика». Оксана Решетникова, директор Федерального института педагогических измерений, считает, что к 2030 году ЕГЭ будет проводиться с использованием планшетов и других устройств, а бумажные бланки уйдут в прошлое. Задания будут передаваться в аудитории в день экзамена по защищенным каналам, а проверка будет полностью возложена на искусственный интеллект.
Таким образом, можно сделать вывод, что искусственный интеллект активно внедряется в образовательную сферу, в частности, на ЕГЭ. Технологии стремительно развиваются и начинают заменять традиционные форматы. Поэтому я настоятельно призываю всех выпускников готовиться к ЕГЭ самостоятельно и качественно.
источник — https://mel.fm/blog/mikhail-lantsman/4196-yege-budet-proveryat-neyroset-kak-iskusstvenny-intellekt-stal-chastyu-gosekzamenov-v-rossii
