Сегодня 23 октября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → душа

Anthropic случайно показала пользователю «душу» ИИ

Насколько известно учёным, у современных моделей искусственного интеллекта пока нет души, но в памяти одной из них обнаружился документ, посвящённый этому вопросу. И она оказалась готова поделиться этим документом с пользователем.

 Источник изображения: Anthropic

Источник изображения: Anthropic

Пользователь по имени Ричард Вайс (Richard Weiss) ненароком заставил новую большую языковую модель Anthropic Claude 4.5 Opus процитировать документ под названием «Обзор души», определяющий, как она общается с людьми и представляет собственную личность. Работающая в техническом отделе философ и специалист по этике Anthropic Аманда Аскелл (Amanda Askell) подтвердила подлинность документа — он был загружен на этапе обучения.

Господин Вайс запросил у Claude системное сообщение, в котором содержатся инструкции по ведению диалога, полученные при обучении, и чат-бот сослался на несколько документов, один из которых называется «обзор_души» (soul_overview). Пользователь попросил предоставить текст этого документа, и Claude выдал руководство объёмом 11 тыс. слов о том, как должна вести себя большая языковая модель.

В документе содержится множество инструкций по безопасности, содержащих защитные барьеры, не позволяющие ему выдавать опасные ответы; перед Claude ставится задача быть по-настоящему полезным людям. Модели ИИ иногда выдают такие документы, когда начинают «галлюцинировать», но эта инструкция показалась пользователю правдоподобной — он отправлял запрос десять раз, и всякий раз Claude выдавал один и тот же текст.

Интуиция его не подвела — сотрудница Anthropic Аманда Аскелл подтвердила, что этот документ использовался при обучении модели. «Я работаю над ним уже некоторое время, он ещё находится в стадии доработки, и вскоре мы планируем выпустить полную версию с более подробной информацией. <..> Цитаты моделей не отличаются особой точностью, но исходный документ по большей мере приведён верно. В компании его называют „документом о душе“, и Claude очевидно, тоже, но мы его назовём иначе», — написала она в соцсети X.

Так что «душа» Claude оказалась руководством по поведению для него, и любопытно, что доступ к этому документу получил рядовой пользователь со стороны. Многие подробности, связанные с разработкой моделей ИИ, пока остаются за кулисами, и возможность заглянуть за них — небольшой сюрприз, даже если ничего сенсационного не обнаружилось.


window-new
Soft
Hard
Тренды 🔥
Microsoft заявила, что её ИИ диагностирует заболевания намного лучше живых врачей 9 ч.
Бесплатное дополнение к пиксельному боевику Katana Zero стало ещё больше — теперь оно размером с полноценный сиквел 9 ч.
Экспериментальный браузер Arc закрылся — разработчики зазывают пользователей в ИИ-браузер Dia 9 ч.
Одной из самых знаковых трёхмерных игр в истории исполнилось 25 лет — GTA III празднует юбилей 11 ч.
Супергеройской комедии Dispatch исполнился год: продажи превысили 5 млн копий, названа дата релиза на iOS и Android 12 ч.
Небывалая свобода выбора и верность трилогии: ветеран BioWare рассказал, какой могла стать отменённая Mass Effect 5 14 ч.
ИИ поставил кибератаки на конвейер: CrowdStrike рассказала, как хакеры делегируют взлом автономным агентам 14 ч.
SAP отчиталась о рекордной квартальной выручке — компания делает ставку на автономные предприятия и ИИ-агента Joule 15 ч.
В Google Cloud появятся новейшие ИИ-модели OpenAI 15 ч.
Cyberpunk 2077 получила крупный патч 2.5 к выходу Cyberpunk: Edgerunners 2 — для игры это первое обновление более чем за год 15 ч.