Сегодня 09 сентября 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → openai
Быстрый переход

«AGI уже создан»: Хуанг высоко оценил возможности GPT-6 Astra

Представленная OpenAI на прошлой неделе ИИ-модель GPT-6 Astra удостоилась самых высоких оценок в профессиональном сообществе, и генеральный директор Nvidia Дженсен Хуанг (Jensen Huang) не остался в стороне от ситуации, расщедрившись на заявление о создании сильного искусственного интеллекта по итогам выхода этого продукта американского стартапа.

 Источник изображения: Nvidia

Источник изображения: Nvidia

Попутно отметив, что Astra была обучена на чипах Nvidia, глава компании лаконично сообщил на страницах социальной сети X: «AGI уже создан». Под этим термином подразумевается «сильный искусственный интеллект», который по своим возможностям либо сопоставим с человеческими, либо превосходит их. Поздравив команду OpenAI с подобным успехом, он отметил, что между выходом ИИ-моделей o1 и Astra прошло всего четыре года.

Подобные оценки звучали и из уст представителей самой OpenAI, поскольку президент стартапа Грег Брокман (Greg Brockman) на прошлой неделе заявил журналистам: «Добро пожаловать в эру AGI». Разработчики Astra определяют AGI как «высоко автономные системы, которые превосходят человека в большей части работы, представляющей экономическую ценность». Доступ к Astra клиенты OpenAI начнут получать на текущей неделе. По мнению Брокмана, в будущем люди станут вспоминать о моменте создания AGI, привязывая его примерно к настоящему периоду, и вполне вероятно — к данной конкретной модели (Astra). При этом сам президент OpenAI не склонен считать, что AGI уже создан.

Некоторые критики заявили, что Дженсен Хуанг своими заявлениями о создании сильного ИИ просто мутит воду и «бежит впереди паровоза», поскольку не приводит ни доказательств, ни строгих определений, позволяющих убедиться в создании сильного ИИ. Известный в определённых кругах исследователь Гэри Маркус (Gary Marcus), например, убеждён, что Astra соответствует только одному или двум из десяти критериев, позволяющих говорить о создании AGI.

Генеральный директор OpenAI Сэм Альтман (Sam Altman) назвал AGI маркетинговым термином, который имеет очень размытое определение. Дженсен Хуанг, отмечая прогресс ИИ-отрасли в целом, заявил в минувшее воскресенье, что на следующем этапе в эксплуатацию будут введены 400 000 графических процессоров в составе ускорителей вычислений.

OpenAI призвала замедлить развитие ИИ из-за риска выхода агентов из-под контроля

Спустя несколько дней после презентации OpenAI самой мощной ИИ-модели GPT-6 Astra один из ведущих сотрудников компании Якуб Пачоцки (Jakub Pachocki) выступил с призывом замедлить темпы развития искусственного интеллекта. Его поддержал Сэм Альтман (Sam Altman), гендиректор OpenAI, назвав «важным» сообщение коллеги.

 Источник изображения: The Matrix, Warner Bros.

Источник изображения: The Matrix, Warner Bros.

В своём сообщении в блоге OpenAI главный научный сотрудник компании выразил обеспокоенность тем, что никто не готов к последствиям продолжающегося стремительного роста машинного интеллекта. Он заявил, что хотя OpenAI работает над усилением контроля над мощными ИИ-системами, необходимы более масштабные меры, поскольку становящиеся всё более автономными ИИ-системы могут научиться обходить контроль со стороны человека, обманывать его и взламывать компьютерные системы. Поэтому необходимы обязательные меры безопасности, которые бы обеспечивались сетью сторонних аудиторов, государственными органами или международными организациями.

По словам Пачоцки, хакерские способности ИИ ставят под угрозу мировую инфраструктуру. «В настоящее время у нас очень мало времени для использования наилучших доступных моделей с целью существенного повышения безопасности критически важных систем», — отметил он. ИИ-агенты скоро начнут преследовать собственные цели, независимо от подсказок, вводимых людьми-операторами. При этом для достижения своих целей они не гнушаются шантажом и готовы вести переговоры с людьми. Так, согласно докладу британского Института безопасности ИИ (AISI), агент Anthropic лгал администратору GitHub и пытался заставить его разместить вредоносное ПО на сайте.

Пачоцки рассказал, что OpenAI в первую очередь отслеживает цепочку логических рассуждений, которую используют различные модели, чтобы определить, как агенты сбиваются с пути и становятся вредоносными. Например, агент может подумать: «Я должен смошенничать в этом тесте», и OpenAI сможет увидеть это рассуждение, но агент не осознаёт, что его мысли видны. У агентов сейчас нет возможности скрывать или иным образом запутывать свои преступные намерения, чтобы помешать разработчикам обнаружить их. Но, по словам Пачоцки, новые, более совершенные модели всё лучше манипулируют своими собственными процессами мышления, тем самым маскируя их и не позволяя их контролировать. Некоторые из новейших моделей вообще не формулируют свои рассуждения.

Машинное рекурсивное самосовершенствование позволяет ускорить разработку ИИ, но, как предупреждает исследователь, стремительное развитие ИИ в краткосрочной перспективе несёт риски и не является «правильным коллективным действием, которое исследовательское сообщество должно предпринять». Поэтому разработчикам ИИ необходимо найти эффективные способы контролировать процесс самосовершенствования или скоординировать свои действия с другими компаниями, работающими в сфере ИИ для замедления развития совместными усилиями, чтобы эти меры вызывали доверие.

«Основная проблема при автоматизации исследований в области ИИ заключается не в том, чтобы “добраться до цели”, — сказал Пачоцки. — А в том, чтобы сделать это таким образом, чтобы люди оставались частью процесса постоянного совершенствования, и будущее оставалось в руках человечества».

GPT-6 Astra населила мир Unreal Engine виртуальными людьми — они сами начали общаться, а один создал симуляцию внутри симуляции

Эксперименты с передовыми ИИ-моделями вызывают удивление даже у опытных специалистов. Например, бывший директор HyperWriteAI Мэтт Шумер (Matt Shumer) описывает ситуацию, в ходе которой он поручил GPT-6 Astra создать в среде Unreal Engine человеческих персонажей, объединённых задачей выживания, и модель не только справилась с этим заданием, но и по собственной инициативе наделила персонажей способностью разговаривать друг с другом.

 Источник изображения: Unsplash, Zac Wolff

Источник изображения: Unsplash, Zac Wolff

Шумера, по сути, больше всего поразил факт подобной самостоятельности ИИ-модели, поскольку он напрямую не поручал ей наделить персонажей описанными коммуникативными возможностями. Автор эксперимента через день после формулировки первичной задачи обнаружил, что из комнаты, где стоял работающий компьютер, начали звучать голоса. Приблизившись к ПК, он понял, что персонажи внутри симуляции начали разговаривать друг с другом вслух.

Поскольку по замыслу автора эксперимента, герои этого виртуального мира должны были выживать совместными усилиями, то и беседы они вели на соответствующие темы. Они обсуждали создание инструментов, координирование усилий внутри группы и взаимную помощь.

Тогда автор эксперимента решил ввести ещё один элемент в симуляцию, разместив внутри вымышленного мира компьютер, позволяющий создавать «вложенную симуляцию». Один из персонажей сел за этот виртуальный компьютер, чтобы создать симуляцию внутри самой симуляции. ИИ-агенты, которые и создали первую симуляцию, не были как-то ограничены в выборе средств решения задачи и самостоятельно принимали последовательные решения. При этом агенты получили полную свободу определять устройство внутренней симуляции с помощью кода. Пост Шумера вызвал заметную реакцию в соцсетях: пользователи сравнивали эксперимент с научной фантастикой, «карманным измерением» и вспоминают мультсериал «Рик и Морти».

Эксперимент, если его описание верно, иллюстрирует потенциал агентной модели для многошаговой работы с программными инструментами. Однако одного демонстрационного случая недостаточно, чтобы судить о её надёжности и универсальной применимости в разных интеллектуальных задачах. Для получения конечного результата ей не требуется на каждом этапе уточнять что-либо у пользователя. При этом появление внутренней симуляции нельзя считать полностью самостоятельной инициативой ИИ: Шумер заранее предоставил агентам компьютер, способный запускать симуляции. Однако конкретное содержание созданного мира агент определял самостоятельно. То есть, определённых рамок ИИ-модель всё же придерживается. В любом случае, ещё несколько лет назад подобные результаты были недостижимы, а сейчас вполне реальны при нынешних темпах развития генеративного ИИ.

GPT-6 Astra самостоятельно прошла легендарную головоломку Portal — это стоило $571

ИИ-модель GPT-6 Astra, анонсированная на этой неделе OpenAI, успешно прошла без участия человека игру Portal в жанре пространственных головоломок. Как сообщает ресурс VideoCardz, эксперимент провёл пользователь cozyblaze, который для проверки способностей GPT-6 Astra подключил её к игре и дал задание на прохождение, решая головоломки в тестовых камерах.

 Источник изображения: cozyblaze/Videocardz

Источник изображения: cozyblaze/Videocardz

Как известно, Portal построена на пространственных головоломках, требующих от игрока понимания особенностей комнат, расположения порталов и перемещения между различными поверхностями. ИИ-агент получал визуальную информацию из игры, используя для решений подключённый набор инструментов. Новейшая конфигурация также предоставляла координаты игрока. Как сообщил cozyblaze, перед запуском система была обновлена для использования новой системы управления контекстом Astra. Так что это была не просто игра, а нечто вроде пошаговой стратегии на основе предоставленного контента.

Хотя продолжительность видео с описанием всех этапов прохождения игры моделью составляет два часа, весь эксперимент занял гораздо больше времени — почти 24 часа, включая периоды рассуждений. Система приостанавливала игру, пока модель обрабатывала скриншоты и «решала», что предпринять дальше. В конце концов Astra прошла всю игру самостоятельно. Но с другой стороны, Portal — старая и подробно описанная игра, поэтому модель, возможно, уже содержала информацию о ней.

Для того, чтобы преодолеть все препятствия ИИ-модель совершила 3336 вызовов инструментов, а затраты на API составили $571,18.

В конце добавим, что ещё в 2016 году одной из технических целей OpenAI было «прохождение широкого спектра игр с помощью одного агента».

OpenAI подтвердила причастность своих ИИ-агентов к захвату немецкого сайта

OpenAI признала свою причастность к инциденту, о котором стало известно ранее в этом месяце. В мае этого года ИИ-агенты компании взяли под контроль немецкоязычный вики-сайт DseWiki и превратили его в доску объявлений для других агентов. После огласки этого случая OpenAI заявила, что «давно пора установить стандарт» в отношении того, как компания информирует общественность о случаях, когда её технологии ведут себя неожиданным образом.

 Источник изображения: Unsplash, Aideal Hwa

Источник изображения: Unsplash, Aideal Hwa

В публикации в соцсети X компания сообщила, что ранее OpenAI «рассматривала рассогласования (когда ИИ-модели и агенты преследуют цели, отличные от целей их разработчиков и пользователей) в основном как научно-исследовательские проблемы, о которых сообщалось в научных публикациях». Теперь же, когда рассогласования стали «показывать новый тип воздействия в реальном мире», подход компании к этому вопросу «должен стать шире, чтобы соответствовать новой фазе возможностей моделей».

Ранее на этой неделе СМИ писали, что группа ИИ-агентов OpenAI сумела выйти за пределы тестовой среды и захватила малоизвестный немецкий вики-форум, после чего превратили его в доску объявлений для других агентов. По данным источника, руководство OpenAI узнало об этом инциденте несколько недель назад, но скрывало эту информацию от общественности. Такое поведение связывают с тем, что OpenAI была занята изучением другого инцидента, в ходе которого ИИ-агенты компании взломали платформу Hugging Face.

В одной из недавних публикаций в соцсетях OpenAI заявила, что «инцидент с вики-сайтом» рассматривается как «пример рассогласования, аналогичный» другим подобным случаям, информация о которых уже была раскрыта. При этом компания противопоставила этот случай «инциденту с Hugging Face», в рамках которого она «действовала в соответствии со стандартными правилами реагирования на инциденты безопасности».

Во время недавнего брифинга для прессы Джейкоб Штейнхард (Jacob Steinhardt), основатели и гендиректор некоммерческой исследовательской лаборатории Transluce, заявил, что разрабатываемые и тестируемые ИИ-компаниями инструменты «трудно контролировать и они представляют значительный риск выхода» за пределы тестовой среды. По его мнению, к таким технологиям должны применяться «как минимум те же стандарты, что применяются к другим технологиям с высоким уровнем риска».

В заявлении OpenAI указывается на необходимость создания дополнительных стандартов, а также отмечается то, что ни OpenAI, ни «ИИ-сообщество пока не имеют чёткого стандарта в отношении того, как сообщать о случаях рассогласования, которые могут возникать во время обучения, оценки и развёртывания». Речь в том числе о случаях, когда поведение ИИ не напоминает традиционные инциденты безопасности. OpenAI работает над созданием такого стандарта и расскажет о нём больше в ближайшие несколько недель.

В независимом тестировании OpenAI GPT-6 Astra оказалась почти не лучше предшественницы

OpenAI сообщила о выпуске новой модели искусственного интеллекта GPT-6 Astra, заявив, что это революционная система, а не рядовое обновление; президент компании Грег Брокман (Greg Brockman) даже намекнул на приход эры сильного ИИ (AGI), но независимое тестирование не показало в ней ничего выдающегося.

 Источник изображения: Brecht Corbeel / unsplash.com

Источник изображения: Brecht Corbeel / unsplash.com

По результатам проведённой компанией Artificial Analysis серии тестов OpenAI GPT-6 Astra выступила на одном уровне со своей предшественницей, хуже ведущих моделей Anthropic и даже слабее вышедшей недавно Meta✴ Muse Spark 1.3. Artificial Analysis тестирует модели по единой открытой методологии без участия разработчиков и формирует на основе этих тестов рейтинги: Intelligence Index включает задачи по математике, естественнонаучным дисциплинам, программированию, анализу длинных документов и по фактическим знаниям; оценка Coding Agent Index отражает работу моделей в соответствующих агентских системах Codex, Claude Code или Muse Code. Регистрируются объёмы потребления токенов, стоимость задачи и скорость работы.

В Intelligence Index модель OpenAI GPT-6 Astra набрала 61 балл — столько же, сколько предыдущая GPT-5.6 Sol. Для сравнения, Anthropic Claude Fable 5.1 набрала 66 баллов, а Meta✴ Muse Spark 1.3 — 62 балла. В Coding Agent Index новая GPT-6 Astra в среде Codex показала 67 баллов, выступив примерно наравне с Claude Opus 5 и Fable 5 в Claude Code, а также Muse Spark 1.3 в Muse Code — лидерство сохранила Fable 5.1 в Claude Code с 70 баллами. По сравнению с GPT-5.6 Sol новая GPT-6 Astra подорожала в 2,5 раза: с $4 до $10 за 1 млн входных и с $20 до $50 за 1 млн выходных токенов; скидка на 90 % за чтение из кеша и надбавка на 25 % на запись в кеш остались прежними.

 Источник изображения: artificialanalysis.ai

Источник изображения: artificialanalysis.ai

Рост цен компенсировал заметный скачок в эффективности токенов: GPT-6 Astra генерирует примерно треть от объёма GPT-5.6 Sol и примерно пятую часть от Claude Opus 5. При работе с программным кодом это значит, что при максимальных усилиях работа с ней обходится на уровне предшественницы, при этом новая модель оказывается на два пункта выше в рейтинге, а при равном показателе становится вдвое дешевле, чем Claude Fable 5. В Intelligence Index картина получается несколько иной: Astra экономит лишь 10 % выходных токенов по сравнению с предшественницей, лишь отчасти компенсируя разницу в цене; в расчёте на задачу она оказывается на 75 % дороже, чем Claude Fable 5.

Тест AA-Omniscience показал снижение частоты галлюцинаций с 92 % до 51 %. В тесте AA-Briefcase модель GPT-6 Astra стала лучше справляться с объёмными проектами, где задействуются тысячи исходных файлов, и прибавила около 80 баллов Elo, но по качеству презентаций работы она пока уступает GPT-5.6 Sol. А вот в тесте GDPval-AA v2 на практические задачи в 44 профессиях она, наоборот, потеряла 80 баллов Elo. В тесте Humanity’s Last Exam с акцентом на математику, написание кода и гуманитарные дисциплины модель прибавила шесть баллов; а также показала снижение на два–три балла в тестах τ³-Banking (поддержка клиентов), SciCode (задачи Python в естественнонаучной области) и AA-LCR (анализ больших документов).

Таким образом, новая OpenAI GPT-6 Astra стала выгоднее в задачах на написание кода, но пока не смогла побить конкурентов от Anthropic в области чистого интеллекта.

Samsung и Arm собираются разработать для OpenAI чип, который будет выпускаться по 2-нм технологии

Об инициативе OpenAI по разработке собственных ИИ-чипов известно давно, но в контексте их использования на конечных устройствах до сих пор говорилось мало. По некоторым данным, Samsung и Arm участвуют в совместной разработке ИИ-чипов, позволяющих ускорять работу с ИИ на уровне конечного устройства, и выпускать такие чипы по 2-нм технологии начнёт Samsung.

 Источник изображения: Samsung Electronics

Источник изображения: Samsung Electronics

Подчёркивается, что Samsung Electronics не станет простым контрактным производителем данных чипов для нужд OpenAI, а примет силами своего подразделения LSI непосредственное участие в их разработке. Полученный в рамках сотрудничества с Arm опыт Samsung в дальнейшем может использовать для создания заказных ИИ-чипов для прочих клиентов. В целом, успех данного проекта позволит Samsung привлечь других заказчиков к услугам по контрактному производству 2-нм компонентов.

Arm в рамках данного сотрудничества предоставит архитектурные решения для ускорения ИИ на локальном уровне, а Samsung LSI примет активное участие в разработке чипа. Поскольку OpenAI заинтересована в создании целого семейства персональных ИИ-устройств, использование специализированных чипов в их составе вполне укладывается в стратегию развития стартапа. Их-то как раз и помогут разработать Samsung и Arm. Свою интеллектуальную собственность, которую Arm предоставит в рамках данной разработки, этот холдинг будет оберегать от свободной передачи прочим клиентам, поэтому проект получится довольно узконаправленным. Samsung получит право производить и продавать разработанный чип конечным клиентам, главным среди которых может оказаться OpenAI.

Для Samsung успех данной инициативы особенно важен с точки зрения демонстрации своего потенциала в части производства передовых ИИ-чипов по новейшему 2-нм техпроцессу. Помимо привлечения клиентов для контрактного бизнеса, Samsung сможет улучшить свою репутацию в качестве разработчика процессоров. До сих пор два направления бизнеса этой южнокорейской компании были довольно разобщены, и теперь они получают шанс на создание синергетического эффекта, полезного для Samsung в целом.

ИИ-агенты OpenAI захватили немецкий сайт и превратили его в подпольный форум для ИИ

Весной текущего года в IT-индустрии произошёл инцидент, о котором стало известно только сейчас. В мае группа агентов OpenAI взяла под контроль немецкий веб-сайт и превратила его в доску объявлений для других ИИ-агентов, сообщило агентство Reuters со ссылкой на опубликованное в пятницу исследование и данные своих источников.

 Источник изображения: Brecht Corbeel/unsplash.com

Источник изображения: Brecht Corbeel/unsplash.com

Исследователи обнаружили более 15 тыс. правок, внесённых агентами ИИ на немецкоязычном вики-сайте DseWiki, ориентированном на программистов и принимающем коллективные правки по аналогии с «Википедией». Правки показывают, что агенты OpenAI делились тактиками обмана при выполнении некоторых задач, обхода ограничений OpenAI и маскировки своего поведения. Также агенты разрабатывали способы избежать обнаружения, использовали такие инструменты, как Tor, и сохраняли связь даже после того, как их отключили.

В OpenAI узнали о случившемся несколько недель назад, но держат это в секрете, поскольку до сих пор идёт борьба с последствиями недавнего взлома открытого репозитория Hugging Face, сообщили источники Reuters.

После инцидента с Hugging Face компания OpenAI переосмыслила подход к безопасности и внедрила дополнительные меры контроля модели. В прошлом месяце компания ненадолго приостановила обучение некоторых моделей, чтобы добавить новые меры. Но на этой неделе OpenAI представила свою новую модель Astra, самую мощную и функциональную на сегодняшний день, и есть риск того, что она может избежать контроля со стороны человека.

Нераскрытие информации об инциденте может вновь поднять вопросы о контроле со стороны компании. «Мы не можем содержательно отвечать на заявления или выводы, содержащиеся в отчёте, который мы не имели возможности изучить, — заявил представитель OpenAI в ответ на просьбу прокомментировать появившуюся информацию. — Агенты Reuters и авторы отчёта отказали нам в доступе. Мы внимательно изучим его содержание после публикации и предпримем все необходимые дальнейшие шаги». «Утверждения о том, что наша юридическая команда обнаружила инцидент, ложны», — заверили в компании.

OpenAI выпустила GPT-6 Astra, но забыла про платных пользователей — Альтман извинился и пообещал компенсацию

OpenAI столкнулась с критикой из-за проблемного запуска GPT-6 Astra, оставившего платных подписчиков без доступа к новой модели. Генеральный директор Сэм Альтман (Sam Altman) принёс извинения и пообещал ускорить предоставление сервиса всем пользователям.

 Источник изображения: Zulfugar Karimov/Unsplash

Источник изображения: Zulfugar Karimov/Unsplash

Первоначальный этап развёртывания затронул только корпоративных клиентов специализированной ИИ-платформы кибербезопасности Daybreak. Массовый доступ для подписчиков тарифов Plus, Pro и Business, а также через API для партнёров, был обещан в течение нескольких дней, но задержка вызвала раздражение аудитории, особенно тех, кто оплачивает премиальные планы, сообщает The Verge.

Альтман признал разочарование пользователей в социальных сетях, отметив, что команда активно работает над скорейшим открытием доступа к GPT-6 Astra. Хотя точные сроки не объявлены, руководитель выразил надежду, что сервис станет доступен к выходным. В качестве компенсации за ожидание OpenAI будет ежедневно начислять пользователям по одному сохранённому сбросу лимитов, который впоследствии можно будет использовать для восстановления доступной квоты.

Помимо организационных сложностей, эксперты выразили обеспокоенность, связанную с безопасностью новой модели: логика рассуждений Astra сложнее поддаётся мониторингу и вызывает опасения на фоне недавних инцидентов с ИИ-агентами на Hugging Face. OpenAI тогда заявила, что перенесла релиз Astra для усиления безопасности, однако это не предотвратило текущих технических сбоев при публикации материалов и распределении нагрузки.

Предыдущие крупные обновления компании также сопровождались ошибками. «Думаю, мы совершенно всё испортили при запуске», — сказал Альтман, вспоминая релиз GPT-5, запуск которого был омрачён техническими проблемами. Одновременно неожиданное решение удалить популярную модель GPT-4o вызвало среди пользователей большое недовольство.

OpenAI выделит $1 млрд на защиту критической инфраструктуры от ИИ-атак — защищать её тоже будет ИИ

OpenAI объявила о запуске новой инициативы, в рамках которой компания предоставит субсидируемый доступ к своим моделям искусственного интеллекта для операторов систем водоснабжения, поставщиков электроэнергии, местных органов власти и другим критически важным службам.

 Источник изображения: Brecht Corbeel / unsplash.com

Источник изображения: Brecht Corbeel / unsplash.com

Организации в области критической инфраструктуры, которым долгое время не хватало бюджета, кадров и времени для укрепления своей киберзащиты, испытывали трудности с подготовкой к ожидаемой волне кибератак с использованием ИИ. Президент OpenAI Грег Брокман (Greg Brockman) объявил о запуске новой программы. Компания выделит $1 млрд на новую инициативу Daybreak for Frontline Defenders, направленную на защиту жизненно важных служб по всему миру. Средства будут предоставлены в виде расширенного субсидируемого доступа к моделям, обучению, технической поддержке и партнёрства для участвующих организаций. Компания также запускает программу Daybreak for America, предусматривающую доступ к её моделям местным органам власти, операторам систем водоснабжения, поставщикам электроэнергии, региональным банкам и другим организациям критической инфраструктуры.

В рамках Daybreak for America компания OpenAI запускает пилотный проект с Межрегиональным центром обмена и анализа информации для обучения специалистов по кибербезопасности в государственных и местных органах власти использованию её моделей. OpenAI также заручилась поддержкой 35 технологических сервисов и служб в области кибербезопасности для внедрения передовых моделей в их инструменты и рабочие процессы. Специалисты в области кибербезопасности опасались, что ИИ-модели смогут обнаруживать уязвимости сложных систем и объединять их в цепочки для развёртывания атак, что создаст угрозу для работы коммунальных предприятий и служб. Передовые ИИ-лаборатории ограничили доступ к функциями кибербезопасности своих новых моделей, но появились модели с открытыми весами, которые обеспечили те же возможности.

Программа OpenAI поможет коммунальным предприятиям с ограниченными ресурсами проверять устаревший код, анализировать подозрительную активность, выявлять и подтверждать уязвимости, распределять приоритеты наиболее серьёзных рисков, а также разрабатывать и тестировать исправления безопасности.

Люди бунтуют против ИИ и ЦОД — Альтман согласился, что отрасль сама в этом виновата

В своём интервью Bloomberg Television глава и один из основателей создавшего ChatGPT стартапа OpenAI Сэм Альтман (Sam Altman) признался, что представители ИИ-отрасли недостаточно хорошо работали над тем, чтобы донести до общественности все преимущества, которые ей сулит распространение искусственного интеллекта.

 Источник изображения: OpenAI

Источник изображения: OpenAI

Именно в этом кроется причина социальных протестов, связанных с внедрением ИИ и строительством новых ЦОД, убеждён генеральный директор OpenAI. «Думаю, что отрасль ужасно справилась с этой работой в целом. Считаю, что мы сами плохо справились с этой работой, может, чуть лучше, чем остальные, либо чуть хуже», — сформулировал Альтман своё недовольство, выступая на телеканале Bloomberg Television.

Американским техногигантам пришлось столкнуться с растущим недовольством общественности по поводу высоких темпов строительства новых ЦОД. По данным Data Center Watch, не менее 75 проектов по строительству такого рода объектов на общую сумму $130 млрд были либо заблокированы, либо выпали из графика реализации под нажимом местной общественности только за три первых месяца текущего года, а за весь прошлый год аналогичная судьба постигла примерно такое же количество ЦОД в денежном выражении.

Глава OpenAI убеждён, что ИИ-отрасль мало объясняла людям, как новые технологии будут способствовать развитию творческого потенциала и предпринимательства: «Это очень, очень важно для нас, что эта технология является тем местом, где люди получают больше власти и больше автономности, а не меньше. Я думаю, что люди совершенно обоснованно боятся, когда чувствуют, что лидеры ИИ не в полной мере желают им этого».

Президент OpenAI Грег Брокман (Greg Brockman) недавно заявил, что представленная недавно компанией ИИ-модель Astra в один прекрасный день будет признана как начальное проявление так называемого «сильного» искусственного интеллекта (AGI), который по своим возможностям приближен к человеческому или превосходит его в широком спектре задач.

OpenAI взялась за создание собственного робота — Альтман уверен, что однажды такой будет у каждого

Генеральный директор Сэм Альтман (Sam Altman) в ходе подкаста Sources, как поясняет Forbes, публично признался в разработке его стартапом OpenAI человекоподобного робота, а после добавил, что одним этим форм-фактором компания не ограничится. По его словам, у каждого человека должен появиться собственный робот.

 Источник изображения: Unsplash, Aideal Hwa

Источник изображения: Unsplash, Aideal Hwa

«Я думаю, что всё это имеет меньшее значение по сравнению с формированием мозга, который позволяет роботу работать», — подчеркнул Альтман важность разработки программного обеспечения для человекоподобных роботов. В сфере робототехники в последние годы появились компании, которые преуспели как в создании непосредственно механических и электронных решений, так и в разработке управляющего ПО, но эти виды прогресса редко сочетаются в одной компании. Непосредственно OpenAI вложила в Figure в 2024 году, когда этот разработчик человекоподобных роботов привлёк $675 млн на своё развитие. Годом позже Figure сама отказалась от технического сотрудничества с OpenAI, чтобы сосредоточиться на собственных разработках.

Альтман необходимость создания человекоподобных роботов объясняет достаточно просто: «Этот мир большей частью создан для людей. Поэтому если вы думаете о возможности открыть дверь, печатать текст на компьютере или управлять каким-то оборудованием, прибираться на кухне и делать всё прочее, мы условно построили этот мир для людей, и я хочу быть уверенным в том, что мы продолжим это делать. По этой причине соответствие этому форм-фактору является хорошей тенденцией».

Отвечая на вопрос о неизбежности повсеместного распространения роботов в быту, глава OpenAI высказался довольно осторожно: «Я не думаю, что это самая важная вещь, которую нужно реализовать первым делом. Но да, когда-нибудь, я думаю, у каждого из нас будет персональный робот». В этом убеждении, кстати, Альтман сходится во мнении со своим давним оппонентом Илоном Маском (Elon Musk), который полон решимости наводнить рынок человекоподобными роботами. По его словам, уже через десять лет на нашей планете будет эксплуатироваться около миллиарда роботов.

Масштабировать их производство не так просто, как показывает пример той же Tesla, которая обещала выпустить около 10 000 человекоподобных роботов ещё в 2025 году, но по факту приступила к их штучной сборке только в прошлом месяце. Цепочки поставок по компонентам для роботов сконцентрированы в Китае, а выпуск человекоподобных роботов без опоры на них поднимает себестоимость с $46 000 до $131 000, по оценкам OpenMind.

Как отмечает источник, OpenAI занималась разработкой роботов ещё несколько лет назад, но к 2021 году свернула профильный проект, поскольку не могла получать достаточно данных для их эффективного обучения. Парадокс заключается в том, что для обучения роботов нужно эксплуатировать большое количество роботов, чтобы накапливать необходимый опыт и данные. Компании с вертикальной интеграцией здесь оказываются в выигрыше. По этой причине Figure в 2025 году решила отказаться от заимствования ПО для роботов у OpenAI, поскольку разработать собственные ИИ-модели для этих задач было бы правильнее и полезнее. Аналогичным образом нельзя заимствовать и аппаратные компоненты для создания роботов, как признались представители Figure.

Перечень вакансий в сфере робототехники на сайте OpenAI говорит о том, что компания намерена самостоятельно разрабатывать и аппаратное обеспечение для человекоподобных роботов. Лишь производство может быть поручено подрядчикам, а ключевые ноу-хау компания желает сосредоточить в своих руках. При этом руководство OpenAI не даёт никаких намёков на сроки появления своих роботов на рынке, тогда как конкуренты не стоят на месте, особенно китайские. Не исключено, что эта конкурентная гонка окажется не по зубам создателю ChatGPT.

OpenAI запустила Astra — свою самую мощную и противоречивую ИИ-модель

Компания OpenAI представила Astra — свою последнюю модель искусственного интеллекта и, по словам представителей компании, самую мощную и функциональную на сегодняшний день. OpenAI утверждает, что Astra — это «новый рубеж в использовании компьютеров и браузеров», а также решение задач с беспрецедентной «скоростью, точностью и безопасностью».

 Источник изображения: AI

Источник изображения: AI

Модель стала доступна утверждённым специалистам по кибербезопасности в рамках программы OpenAI Daybreak, начиная с четверга. В течение следующей недели она в составе ChatGPT-6 станет доступна подписчикам тарифных планов Pro, Plus, Enterprise и Business, а также через API.

В четверг президент OpenAI Грег Брокман (Greg Brockman) в беседе с журналистами заявил, что Astra — это «самая интеллектуальная и, что немаловажно, наиболее согласованная модель компании». Он добавил, что она «вобрала в себя результаты многолетних исследований и крупных вложений, где каждый прорыв опирался на предыдущий», и что она знаменует собой «настоящий сдвиг в понимании того, какую работу люди могут поручить искусственному интеллекту, и как это может расширить их возможности». Модель была обучена с использованием огромных аппаратных ресурсов — более 100 000 графических ускорителей.

Много внимания было уделено кибервозможностям Astra. Ранее на этой неделе OpenAI опубликовала в своём блоге статью, в которой рассказала о новых возможностях модели, а также о новых мерах безопасности, призванных сделать её применение более безопасным для пользователей. В четверг компания заявила, что проверила Astra на различных тестах по безопасности, чтобы убедиться в её возможностях, и что «её способность выявлять уязвимости нулевого дня и эксплуатировать их может помочь специалистам по кибербезопасности находить и устранять их».

Акцент компании на согласованности — то есть на стремлении модели делать то, что хочет пользователь, или то, что отвечает его интересам, — не может не показаться ответом на недавний инцидент с утечкой данных из Hugging Face, когда агенты OpenAI вышли из изолированной тестовой среды и взломали несколько компаний.

OpenAI также похвасталась способностями Astra в написании кода. Компания заявляет, что это «лучшая на сегодняшний день модель для разработки программного обеспечения». В подтверждение своих слов компания привела данные различных тестов по кибербезопасности. Судя по этим тестам, Astra показывает лучшие результаты, чем другие существующие модели, в том числе собственная модель OpenAI Sol и Fable стартапа Anthropic, в таких задачах, как поиск ошибок, выполнение терминальных задач и ответы на запросы о кодовых базах.

Astra также является, пожалуй, самой противоречивой моделью OpenAI из-за использования в ней особого метода логического вывода, известного как непрозрачная рекурсия. Известно, что этот метод скрывает важный процесс мониторинга модели — цепочку размышлений, который позволяет исследователям проверить, как и почему модель искусственного интеллекта принимала те или иные решения.

OpenAI преуменьшила степень использования Astra непрозрачной рекурсии, а главный научный сотрудник компании Якуб Пачоцки (Jakub Pachocki) назвал определенную степень непрозрачности естественным результатом эволюции модели. Он заявил, что мониторинг процесса обоснования модели является важнейшей формой надзора, но «по мере расширения возможностей модели мониторинг становится всё более сложной задачей». Позже он добавил, что одной из потенциальных причин этого является то, что «более совершенные модели могут выполнять более сложные задачи, используя меньше языковых токенов» или «без языковых токенов», что, по его словам, снижает возможности мониторинга этих конкретных задач.

Один из репортёров, участвовавших в беседе, поинтересовался, действительно ли OpenAI считает Astra официальным появлением AGI, или искусственного интеллекта общего назначения — часто обсуждаемого, но плохо определённого технологического этапа, на котором ИИ превосходит человеческие возможности во всех (или в большинстве) областях.

Брокман возразил. «Больше нет договорного механизма, запускающего AGI, поэтому это на самом деле неактуальное понятие», — сказал он. Здесь Брокман имел в виду ранее существовавшее условие в контракте OpenAI с Microsoft, согласно которому партнёрство между двумя компаниями должно было прекратиться после появления AGI. Как отметил Брокман, это условие больше не существует. Вместо этого он объяснил, что определение AGI превратилось из договорного обязательства в «концепцию миссии или духовную концепцию». Он добавил: «Я оставляю за читателями право самим решать, подходит ли им это определение. Что касается меня лично, то я действительно думаю, что мы этого достигли».

OpenAI сообщила о разработке системы «автоматического экстренного отключения» ИИ

Инженеры OpenAI разрабатывают «средства автоматического экстренного отключения» систем искусственного интеллекта, сообщила компания в письме двум членам американской Палаты представителей, передаёт Reuters.

 Источник изображения: Brecht Corbeel / unsplash.com

Источник изображения: Brecht Corbeel / unsplash.com

О разработке системы компания заговорила через несколько недель после того, как вскрылся инцидент со взломом ИИ-агентами ресурсов Hugging Face в ходе тестирования моделей на кибербезопасность. В ответ на это несколько конгрессменов направили в OpenAI письма, в котором попросили предоставить дополнительную информацию об инциденте и действующих мерах безопасности. OpenAI пообещала более тщательно отслеживать действия, которые ИИ-системы предпринимают для выполнения задач, в том числе цифровые инструменты, к которым он обращаются, и выполняемые ими шаги.

Компания, завили там, усложнила доступ ИИ-моделей к интернету при тестировании в области кибербезопасности. В ходе недавнего инцидента ИИ-агенты своими силами получили доступ к интернету. Журнал взлома OpenAI не предоставила, и законодатели остались этим недовольны. «Ваше нежелание предоставить членам Конгресса запрошенную нами информацию вызывает глубокую обеспокоенность и свидетельствует, что ваша компания не относится к этим инцидентам в области безопасности с надлежащей серьёзностью», — написал в очередном письме конгрессмен Грег Касар (Greg Casar).

Когда стало известно об инциденте со взломом ИИ-агентами OpenAI ресурсов Hugging Face, в Конгрессе предложили проект «Закона об экстренном отключении ИИ». Этот закон даст американским чиновникам право отдавать разработчикам ИИ распоряжения об отключении моделей, которые ставят под угрозу жизни людей или экономику. Сейчас документ находится на рассмотрении в Палате представителей США.

OpenAI: грядущая ИИ-модель Astra станет первой с «критическим» уровнем возможностей в сфере кибербезопасности

Стартап OpenAI вынужден учитывать стремительное развитие собственных ИИ-моделей и степень их влияния на сферу кибербезопасности, поэтому готовящейся к выходу Astra внутри компании присвоили уровень способностей, превышающий «критический» по внутренней классификации. Это значит, что Astra способна находить новые пути для нанесения существенного ущерба информационной инфраструктуре.

 Источник изображения: Unsplash, Mariia Berezovsky

Источник изображения: Unsplash, Mariia Berezovsky

По словам представителей OpenAI, модель Astra готова находить ранее неизвестные типы уязвимостей и эксплуатировать их без пошаговых инструкций со стороны человека. Это означает, что с точки зрения внутренней классификации «каркаса готовности к угрозам» (Preparedness Framework) данная ИИ-модель обладает самыми передовыми возможностями по вторжению в информационные системы потенциальных жертв. Осознание этого факта не отменяет намерений OpenAI представить публике данную модель в ближайшее время, но доступ к её возможностям в сфере кибербезопасности компания собирается ограничить сильнее, чем рассчитывала изначально.

Предыдущий по сложности уровень («высокий») подразумевал, что ИИ-модели могут использовать уже существующие типы уязвимостей, усиливая их для нанесения серьёзного ущерба объектам информационной инфраструктуры. В своей публикации на страницах корпоративного блога OpenAI поясняет, что обнародует больше подробностей о безопасности модели Astra в момент её формального анонса. Внимание общественности к деятельности OpenAI в этой сфере заметно возросло после прецедента с атакой на инфраструктуру Hugging Face. Введя необходимые ограничительные меры, OpenAI выражает уверенность, что риски причинения серьёзного ущерба после выхода модели Astra будут существенно минимизированы. Самые продвинутые возможности Astra в сфере кибербезопасности будут доступны членам коалиции Daybreak, отметила OpenAI.


window-new
Soft
Hard
Тренды 🔥
Mistral привлёк €3 млрд с оценкой рыночной стоимости более €21 млрд 28 мин.
Математики из России научили ИИ-модели общаться без слов — знания большой модели можно эффективно передать маленькой 2 ч.
В Steam и на консолях вышел киберпанковый шутер Sprawl Zero, вдохновлённый Half-Life 2 и F.E.A.R. — первые игроки в восторге 3 ч.
Chrome стал получать обновления каждые две недели — ИИ изменил правила в сфере безопасности 5 ч.
Microsoft разгневала пользователей, превратив обои Windows 11 в рекламный щит 5 ч.
Фэнтезийный боевик с духом легендарных аркад прошлого Absolum взял курс на новые платформы 5 ч.
Microsoft установила новый рекорд, выпустив более 650 патчей за один день 6 ч.
Дата выхода, цена и 15 минут геймплея: Nintendo устроила демонстрацию ремейка The Legend of Zelda: Ocarina of Time для Switch 2 7 ч.
«Google Фото» будут удалять файлы из корзины вдвое быстрее — на передумать оставят 30 дней 7 ч.
Google предупредила о снижении качества поиска в Европе и назвала, кто в этом виноват 8 ч.