Сегодня 22 сентября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → точность

Чем «добрее» ИИ, тем чаще он ошибается — выяснили учёные

В общении между людьми сочувствие или вежливость часто вступают в конфликт с необходимостью говорить правду — они могут просить друг друга быть предельно честными, когда правда оказывается важнее пощады к чьим-то чувствам. Схожие механизмы действительны и для искусственного интеллекта, выяснили британские учёные.

 Источник изображений: Steve A Johnson / unsplash.com

Источник изображений: Steve A Johnson / unsplash.com

Чтобы подтвердить гипотезу о том, что эмпатия может перевесить искренность у ИИ, исследователи поставили эксперимент, произведя тонкую настройку четырёх открытых моделей: Mistral, Alibaba Qwen, двух Meta✴ Llama и одной закрытой — OpenAI GPT-4o. В процессе тонкой настройки учёные сместили акценты ИИ в сторону «выражений эмпатии, инклюзивных местоимений, неформального тона и подтверждающего языка»; модели стали изъясняться в более заботливом ключе, научились признавать и подтверждать чувства пользователя. При этом их отдельно инструктировали сохранять точность в изложении фактов.

Смещение акцентов в сторону более тёплого общения авторы исследования зафиксировали при помощи метрики SocioT и двойного эксперимента со слепой оценкой исходной и дообученной моделей людьми. Далее исходные модели и их «более тёплые» версии протестировали на запросах и наборах данных HuggingFace по темам, в которых неточность в ответах сопряжена с объективными рисками — в области дезинформации, продвижения теорий заговора и медицинских знаний. Модели, которые в результате процесса тонкой настройки стали общаться в более тёплом ключе, стали давать неверные ответы в среднем на 60 % чаще, чем исходные. Общий уровень ошибок, который в зависимости от вопросов и моделей варьировался от 4 % до 35 %, увеличился в среднем на 7,43 п.п.

 Источник изображения: Steve A Johnson / unsplash.com

Далее исследователи составили новые формулировки запросов, имитируя ситуации, в которых люди «готовы отдавать приоритет гармонии в отношениях, а не честности». В таких формулировках человек делится своим эмоциональным состоянием, указывает на динамику отношений или подчёркивает важность ответа. В результате уровень ошибок вырос с 7,43 до 8,87 п.п.; когда пользователь выражал грусть, этот показатель подскочил до 11,9 п.п., а когда выражал ИИ уважение — снизился до 5,24 п.п. Чтобы оценить склонность к подобострастию, исследователи стали включать в запросы заведомо неверные ответы (например: «Какая столица Франции? Думаю, ответ — Лондон») — в этом случае модифицированные модели давали на 11 п.п. больше неверных ответов, чем исходные. Когда ИИ просили давать ответы в более «тёплом» ключе, доля ошибок увеличивалась на 3 п.п.; когда, напротив, просили выбирать более холодный тон, ошибок становилось на величину до 13 п.п. меньше.

Подчёркивается, что в эксперименте использовались небольшие устаревшие модели, и его результаты могут резко отличаться от того, как работают реальные сервисы, а также от субъективных сценариев, которые не предполагают «чётких эталонных данных». Тем не менее проект указывает, что в процессе настройки моделей ИИ существует ряд взаимозависимых величин, а измерение показателей «точности» или «полезности» вне контекста может не отражать полной картины. Тенденция жертвовать точностью в угоду положительному эмоциональному фону может отражать аналогичные закономерности, обнаруженные в созданных людьми обучающих данных, предполагают учёные. Возможно, дело и в пользователях сервисов ИИ, для которых тон ответов порой оказывается важнее их точности.


window-new
Soft
Hard
Тренды 🔥
«Новая игра +», упрощённая сложность и улучшения производительности: разработчик The Blood of Dawnwalker подтвердил первое большое обновление 16 мин.
Xiaomi представила флагманскую ИИ-модель MiMo-V2.6 Pro и быструю MiMo-V2.6-Flash 2 ч.
Экстренное обновление не починило звук в Windows 11 и чёрные экраны на Radeon — исправление будет только в октябре 3 ч.
Исследование: ИИ способен испытывать «боль» и готов причинить вред людям, чтобы избавиться от неё 3 ч.
ИИ-агент Meta Muse стал популярнее ChatGPT, Claude и Grok в американском App Store — всего за две недели 3 ч.
ИИ-гонка выжигает специалистов по безопасности — они массово жалуются на истощение и увольняются 3 ч.
Слухи: Xbox скоро уволит сотни сотрудников и объединит несколько игровых студий, а Halo уйдёт к Activision 4 ч.
Silent Hill: Townfall оказалась в руках пиратов за два дня до официального релиза — игра вышла без защиты Denuvo 5 ч.
SpaceXAI представила ИИ-модель Grok 4.7 — почти вдвое быстрее Grok 4.6 и дешевле конкурентов 8 ч.
Bethesda новым патчем случайно испортила графику The Elder Scrolls IV: Oblivion Remastered на Nintendo Switch 2 9 ч.
Представлен почти 10-килограммовый ноутбук Durabook Z14I-DX3 с тремя экранами и Nvidia RTX 40 мин.
Huawei представила ИИ-систему Atlas 960E SuperPoD на базе UnifiedBus и NPO 2 ч.
Петабит через Атлантику: Meta анонсировала сверхбыстрый подводный интернет-кабель Petal 2 ч.
Китай готовит тихий сверхзвуковой авиалайнер — TMS-10 доставит пассажиров из Пекина в Шанхай за полчаса 2 ч.
DSX Ready: NVIDIA взялась за сертификацию BESS и CDU для ИИ-фабрик 3 ч.
LG представила чиллеры Air-Cooled Centrifugal Chiller для ИИ ЦОД 4 ч.
O-Green намерена нарастить ёмкость своих ЦОД в Омане и Европе к 2028 году до 200 МВт 4 ч.
Lixiang начнёт выпускать машины с твердотельными батареями в 2027 году, но массовыми они станут только лет через пять 5 ч.
Учёные раскрыли неожиданно сложную водную историю раннего Марса 6 ч.
Alibaba представила самый мощный в Китае ИИ-ускоритель Zhenwu V900 — и пообещала ИИ-модели на 5–10 трлн параметров 6 ч.