Нейросеть YandexGPT 2 сдала ЕГЭ по литературе на 60 баллов

Яндекс недавно сообщил потрясающую новость: языковая модель YandexGPT 2 успешно сдала ЕГЭ по литературе. Нейросеть не только ответила на тестовые вопросы, но и выполнила творческое задание (сочинение). Впервые нейросеть не только справилась с тестом, но и написала полноценное эссе.

Как сообщает Яндекс: "YandexGPT 2 — нейросеть, которая умеет создавать и перерабатывать тексты, предлагать новые идеи и учитывает контекст беседы с пользователем. Она доступна в режиме Алисы «Давай придумаем». Также YandexGPT кратко пересказывает тексты статей из интернета в Яндекс Браузере и на 300.ya.ru, обобщает информацию из отзывов о товарах в Поиске и на Маркете, помогает создавать описания товаров продавцам Маркета и не только". 

Нейросеть от Яндекса прошла испытание несколько раз, прорешав несколько вариантов заданий ЕГЭ, и набрала в среднем 55 баллов. Напоминаем, что в 2023 году средний балл ЕГЭ по литературе составил 72 балла, а в 2022 - 64. Так что YandexGPT с первого раза показала отличный результат - преодолела минимальный порог и почти приблизилась к среднему результату по стране среди реальных выпускников.

"Стандартным тестом для оценки эрудиции языковых моделей в мире считается MMLU: он включает вопросы разной степени сложности из 57 областей знания. Так можно объективно сравнить несколько нейросетей, но нельзя оценить качество их ответов на открытые или творческие вопросы. Именно поэтому мы предложили YandexGPT 2 сдать ЕГЭ по литературе. Его задания тесно связаны с текстом, языком и пониманием культурного контекста", - прокомментировал эксперимент Алексей Гусаков, технический директор Поиска Янедкса. 

В пресс-службе Рособрнадзора уже сообщили, что развитие искусственного интеллекта не несет угрозы для системы единого государственного экзамена, так как использование гаджетов запрещено во время экзамена, и его участники не могут ими воспользоваться.

Фото: pexels.com