Сегодня 23 марта 2025
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

Нейросеть YandexGPT 2 успешно сдала ЕГЭ по литературе

Разработанная «Яндексом» большая языковая модель YandexGPT 2 справилась с несколькими вариантами ЕГЭ по литературе, получив усреднённую оценку 55 баллов. Это выше минимального порога, необходимого для поступления в вуз (40 баллов) и близко к средней оценке (64 балла), которую получают российские школьники, когда выбирают данный предмет и специально готовятся к экзамену.

 Источник изображений: «Яндекс»

Источник изображений: «Яндекс»

ЕГЭ по литературе содержит несколько испытаний разного рода: вопросы на эрудицию, а также задания для оценки стиля письма и творческих способностей. Для нейросети это непростая задача, но YandexGPT 2 выдержала все испытания: в первой части экзамена она проанализировала произведение и ответила на вопросы о нём, а во второй — написала сочинение на предложенную тему.

В рамках испытания специалисты «Яндекса» получили в Московском центре непрерывного математического образования варианты настоящего ЕГЭ по литературе, которые использовались на тренировочных экзаменах с 2021 по 2023 гг., и удостоверились, что в массиве использованных при обучении YandexGPT 2 данных ответов на эти вопросы нет. Таким образом, нейросеть работала с заданиями наравне с любым школьником, выбирая предложенные варианты и генерируя ответы на открытые вопросы. Проверку проводили официальные эксперты ЕГЭ по литературе.

Разница между сдающими ЕГЭ школьниками и YandexGPT 2 в том, что первые специально готовятся к сдаче, то есть погружаются в специфику предмета, тогда как нейросеть работала скорее экспромтом — схожим образом сдаёт школьные экзамены взрослый человек, опираясь только на накопленные знания. Стандартным способом проверки нейросетей является тест MMLU (Massive Multitask Language Understanding) — он включает вопросы из 57 областей, но не предусматривает оценки ответов на открытые вопросы или написания творческих заданий. Поэтому в «Яндексе» остановились на ЕГЭ по литературе.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Google протестировала отключение новостей в ЕС без потери рекламной выручки 3 ч.
Новая статья: Two Point Museum — чудесный экспонат для коллекции. Рецензия 9 ч.
Tencent выпустила рассуждающую ИИ-модель T1 — она превосходит DeepSeek R1, в отдельных тестах 16 ч.
Российским блогерам назначили коды экономической деятельности в ОКВЭД 16 ч.
США отменили санкции против криптомиксера Tornado Cash с российскими корнями 20 ч.
Частое использование ChatGPT и других ИИ-ботов может привести к обострению чувства одиночества 21 ч.
Keenetic с задержкой призналась пользователям о взломе базы данных своего мобильного приложения 23 ч.
Roblox оказалась антилидером по числу киберпреступлений в 2025 году 22-03 05:43
Последнее обновление Windows 10 вызвало «море» проблем и замедление работы ПК 22-03 05:39
Существующие акционеры ByteDance являются фаворитами готовящейся в США сделки по TikTok 22-03 05:37
Geely не собирается отказываться от использования ДВС в своих машинах 2 ч.
Учёные предприняли попытку сгенерировать электрический ток за счёт вращения Земли 3 ч.
Пиксели размером с вирус: китайские учёные создали самый маленький в мире LED-дисплей 12 ч.
Seeed reComputer J3010B — мини-ПК для ИИ-задач на периферии на базе NVIDIA Jetson Orin Nano 18 ч.
В Китае создали глубоководную «болгарку» для вспарывания бронированных морских интернет-кабелей 18 ч.
GL.iNet Comet — компактный IP-KVM с поддержкой Fingerbot для нажатия физических кнопок 19 ч.
Tesla Cybertruck на автопилоте отказалась таранить стену с нарисованной пустой дорогой 20 ч.
Японцы построили умного домашнего робота Mi-Mo, скрестив лампу Pixar и табурет 21 ч.
Чтобы дыня не треснула: глава Xiaomi оригинальным образом продемонстрировал прочность фирменных батарей для электромобилей 22-03 06:29
Редкий компьютер Apple-1 Bayville продали на аукционе за $375 000 22-03 05:41