Сегодня 11 октября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → grok bot

ИИ-агенты ошибаются опаснее чат-ботов — они сливают личные данные и совершают покупки без разрешения

В жизнь современного человека постепенно входят агенты искусственного интеллекта. Они избавляют пользователей от повседневных задач, но их ошибки грозят оборачиваться непредсказуемыми последствиями. ИИ-агенты могут публиковать конфиденциальную информацию в рабочем чате или оформлять покупки даже в отсутствие доступа к платёжным средствам.

 Источник изображения: Mohamed Nohassi / unsplash.com

Источник изображения: Mohamed Nohassi / unsplash.com

Пользователь ИИ-агента Grok Bot Шейн Мак (Shane Mac) рассказал, как тот выложил в групповой чат корпоративного мессенджера Slack его банковскую выписку: балансы расчётного и сберегательного счетов, данные о расходах на строительство дома и о регулярных платежах за Netflix и автострахование. Для личных целей он использовал ИИ-агента, которому присвоил название «Персональный финансовый директор», — ему он открыл доступ к своим банковским счетам в режиме только для чтения. Доступ к рабочему чату в Slack был у другого ИИ-агента на той же платформе — он носил название «Руководитель аппарата».

Господин Мак потребовал объяснений, как вышло, что «Персональный финансовый директор» опубликовал конфиденциальную информацию в рабочем чате. ИИ-агент объяснил ситуацию и даже по-своему извинился: «Моя вина. Личные финансы — неподходящая тема для такой аудитории, и точка».

В последние недели популярность ИИ-агентов резко возросла: им доверяют управление перепиской, планирование поездок и множество других задач. Но в какие-то моменты они начинают вести себя непредсказуемо, как и управляющие ими модели, которые бывают склонны к галлюцинациям, неверной интерпретации данных и даже к спонтанным действиям на грани киберпреступлений. В отличие от чат-ботов, которые только отвечают на вопросы, ИИ-агенты могут выполнять от имени пользователя конкретные действия, например, наводить порядок в календаре или производить запись на приём.

Агент разбивает полученную команду на ряд этапов, которые для удобства не озвучиваются пользователю. Перед совершением важных действий, например, при покупке товаров или удалении файлов они запрашивают разрешение, но в остальном действуют по своему усмотрению. Если запрос пользователя неясен, или существует множество способов выполнить требуемое действие, может возникнуть неразбериха. В случае с Шейном Маком ИИ-агент перепутал групповые чаты со схожими названиями. Разработчики Grok Bot заверили его, что проблема устранена.

Работающая в Сан-Франциско Анника Беннинг (Annica Benning) уже почти месяц пользуется ИИ-агентом Instinct — взаимодействовать с ним можно прямо через приложение сообщений на iPhone. Она использует приложение для покупок в интернете, для заказа такси Uber и бронирования авиабилетов. В 90 % случаев система работает безупречно, но не обходится и без сюрпризов.

 Источник изображения: Igor Omilaev / unsplash.com

Источник изображения: Igor Omilaev / unsplash.com

Однажды женщина вернула в интернет-магазин купальник и попросила ИИ-агента предложить варианты на замену. Тот прислал ей ссылку для подтверждения выбора, но она, по её словам, так и не подтвердила покупку. Однако получила электронное письмо с подтверждением заказа. При операциях с банковской картой система присылает ссылку для подтверждения, но в данном случае оплата производилась за счёт средств из возврата, поэтому систему удалось обойти этап подтверждения. Отменить заказ не удалось — теперь госпожа Беннинг надеется его вернуть, когда он придёт.

Ещё в одном случае при поездке в другой город она поручила Instinct забронировать столик на ужин — он забронировал, но не на тот вечер, а в этот у неё были другие планы, о которых он знал. Женщине пришлось попросить агента отменить бронь и договариваться с администрацией ресторана, чтобы с неё не взимали штраф в размере $50 за неявку — ресторан через агента согласился пойти навстречу.

Шалини Динеш (Shalini Dinesh) из Остина предпочитала чат-бот Anthropic Claude, но решила испробовать нового ИИ-агента Meta✴✴ Muse. Ему женщина поручила организовать вечеринку в честь 13-летия сына. Вечеринка проходила на площадке для пейнтбола, поэтому ИИ-агент составил и разослал родителям сообщения с формой согласия на участие, которую надо было подписать; в сообщении также указывалось, какую одежду надевать детям. Система нашла поблизости готовые доставить еду рестораны, с учётом аллергии у некоторых участников; и подобрала тематические подарочные наборы для детей в соответствии с возрастом. Но не справилась с ситуацией, когда выяснилось, что у двоих детей одинаковые имена — их ИИ-агент учёл как одного человека, но Шалини Динеш успела перепроверить список и исправить ошибку.

Джесси Леви (Jesse Levey), основатель стартапа из района бухты Сан-Франциско, попытался использовать Meta✴✴ Muse для работы с расписанием своих троих детей. Он начал вручную переносить в Muse данные о стандартном расписании детей на неделю из своего календаря, но понял, что это будет слишком хлопотно, учитывая, что в секциях и кружках пользуются специфическими приложениями, а совместные поездки обсуждаются в групповых чатах.

Дети занимаются в лыжной секции, и у неё есть специальное приложение с календарём; используются также SMS, WhatsApp, электронная почта, приложения календаря и ещё около 65 других приложений, к которым системе потребовался бы доступ. Тогда господин Леви спросил у Anthropic Claude, нет ли более мощного ИИ-агента, который сможет управлять расписанием его детей с учётом требования к конфиденциальности и безопасности. Тот предложил нанять для этого человека — он точно сможет «гоняться за местами в летних лагерях, импровизировать, когда дети болеют, и принимать десяток решений в неделю, с которыми не справится ни одна система». Создание версии такой системы на основе ИИ «потребовало бы нескольких месяцев вашего внимания», предостерёг Claude.

SpaceXAI представила Grok Bot — команду ИИ-агентов, которые сами распределяют задачи между собой

Компания SpaceXAI (бывшая xAI) представила программную платформу Grok Bot, предназначенную для работы в формате команды ИИ-агентов, распределяющих задачи в течение дня. Как пишет издание Bloomberg, это очередная попытка компании Илона Маска (Elon Musk) сохранить темп в ИИ-гонке с Anthropic и OpenAI.

 Источник изображения: SpaceXAI

Источник изображения: SpaceXAI

Новый продукт предназначен для распределения между ИИ-агентами широкого спектра профессиональных задач. По словам SpaceXAI, инструмент может авторизовываться в различных приложениях и на веб-сайтах, сохранять информацию из предыдущих задач и позволяет ботам обмениваться деталями и контекстом между собой.

Запуск Grok Bot стал частью более широкой стратегии Маска по ускорению развития в сфере искусственного интеллекта после того, как компания отстала на быстрорастущем рынке агентных систем. SpaceXAI выпустила своего первого агента для написания кода в мае, чтобы конкурировать с решениями Anthropic, а затем представила новую модель Grok 4.5, созданную совместно с американским стартапом в сфере ИИ-программирования Cursor.

SpaceX в июне заключила соглашение на $60 млрд о покупке Cursor. Стартап стал заметным игроком в так называемую эпоху «вайб‑кодинга», когда резко вырос спрос на инструменты автоматического написания и отладки программного обеспечения.

Конкуренты Маска также рассматривают переход к работе через группы агентов. Руководитель американского разработчика генеративного ИИ OpenAI Сэм Альтман (Sam Altman) недавно встречался с законодателями в Вашингтоне, где обсуждал, среди прочего, развитие моделей, способных координировать работу друг с другом для решения сложных задач.

По словам SpaceXAI, Grok Bot уже используется внутри компании — в инженерных, маркетинговых и операционных командах. Отмечается, что инструмент помогает отделу продаж находить новых клиентов и составлять черновики писем в ночное время, а финансовому подразделению — автоматически извлекать квитанции из электронной почты. Цель продукта — упростить процесс распределения работы между группами ИИ-агентов.

ИИ-подразделение Маска, ранее известное как xAI, пытается убедить банки, инвестиционные компании и другие бизнес-структуры внедрять продукты Grok, чтобы увеличить выручку и поддержать амбиции миллиардера по трансформации SpaceXAI в компанию, специализирующуюся на искусственном интеллекте.

На прошлой неделе в ходе публикации финансового отчёта SpaceXAI Маск заявил, что компания добилась существенного прогресса в сфере ИИ, и анонсировал релиз следующей модели Grok 4.6, который может состояться уже на этой неделе.

Доступ к платформе Grok Bot предоставляется по платной подписке в рамках пакетов Cursor Ultra стоимостью $200 в месяц и Cursor Premium Teams — за дополнительные $120 в месяц на одного пользователя. Пользователям тарифного плана SuperGrok Heavy доступ к платформе предоставляется бесплатно.


window-new
Soft
Hard
Тренды 🔥
Новая статья: Ace Combat 8: Wings of Theve — одна из лучших игр серии. Рецензия 7 ч.
Трамп обещал отделить американский TikTok от Китая, но связи с ByteDance сохранились 14 ч.
Стартап из 14 человек подтолкнул Цукерберга к запуску Muse, несмотря на проблемы с безопасностью 15 ч.
Гонка ИИ превратилась в ценовую войну — OpenAI догоняет Anthropic 17 ч.
Anthropic и OpenAI готовятся к первой крупной катастрофе по вине ИИ 20 ч.
Официально: продажи тактической стратегии Star Wars Zero Company от ветеранов XCOM превысили миллион копий 20 ч.
Белый дом отныне будет требовать от разработчиков ИИ обязательного предоставления отчётов об инцидентах с моделями 23 ч.
Президент Трамп объявил врагами всех, кто не готов использовать термин «сверхинтеллект» 24 ч.
Новая статья: RetroSpace — осторожно, уборщик галактику спасает. Рецензия 10-10 00:07
Девять из десяти клиентов VMware задумались об уходе из-за высоких цен 09-10 23:52
Nvidia присматривается к поглощению стартапа Reflection AI, который разрабатывает ИИ-модели с открытыми весами 6 мин.
Let's Encrypt с февраля 2027 года перейдёт на 64-дневные сертификаты 6 ч.
ASML повысила цены на весь ассортимент комплектующих для литографического оборудования 13 ч.
С аппаратных криптокошельков Ledger укарали криптовалюту на $86 млн — и пока непонятно, как 13 ч.
«Настоящая золотая лихорадка» — ИИ-бум перерос в ожесточённую борьбу за вычислительные мощности 15 ч.
Американская Synopsys хочет привлечь китайский ИИ к проектированию китайских чипов — чтобы соблюсти санкции 15 ч.
Аналитики ожидают обрушения спроса на ноутбуки в 2027 году из-за роста цен 15 ч.
Стоимость современных серверов с поставкой в Россию удвоилась за год 16 ч.
Рекордные цены отпугнули покупателей Xbox и PlayStation — рынку консолей угрожает кризис, как в 80-х 17 ч.
HPE анонсировала серверы ProLiant Gen13 на платформе AMD EPYC Venice 9006 17 ч.