Сегодня 31 июля 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

ChatGPT обрёл зрение — бот научился на лету понимать видеопоток с камеры смартфона и экрана

OpenAI объявила о появлении у чат-бота ChatGPT на базе генеративного интеллекта способности обрабатывать видеопоток и говорить с пользователями о том, что он «наблюдает» с помощью камеры смартфона или компьютера, либо что видит на экране устройства. Новая функция доступна в расширенном голосовом режиме (Advanced Voice Mode).

 Источник изображения: OpenAI

Источник изображения: OpenAI

О том, что ChatGPT получит функцию компьютерного зрения, позволяющую ему «видеть» при помощи камеры смартфона пользователя или через трансляцию экрана, компания объявила в мае этого года. Теперь доступ к функции расширенного голосового режима ChatGPT с распознаванием видео получили владельцы платных подписок ChatGPT Plus, Team и Pro. По словам компании, подписчики ChatGPT Enterprise и Edu не получат эту функцию до января, и что пока нет графика по её запуску в ЕС, Швейцарии, Исландии, Норвегии и Лихтенштейне.

В недавней демонстрации в программе CNN «60 минут» президент OpenAI Грег Брокман (Greg Brockman) провел тестирование расширенного голосового режима с визуальным распознаванием с участием телеведущего Андерсона Купера (Anderson Cooper) на предмет анатомических навыков чат-бота. Когда Купер рисовал части тела на доске, ChatGPT «понимал», что тот рисует. Вместе с тем ChatGPT в этом режиме допустил ошибку в задаче по геометрии, что говорит о его склонности к галлюцинациям.

После анонса в мае компания несколько раз откладывала запуск расширенного голосового режима с визуальным распознаванием. В апреле OpenAI пообещала, что этот режим будет доступен для пользователей «в течение нескольких недель», но спустя несколько месяцев признала, что на это потребуется больше времени, чем планировалось. И когда расширенный голосовой режим запустили для некоторых пользователей в сентябре, у него не было функции компьютерного зрения.

Компании Google и Meta тоже работают над аналогичными возможностями для своих чат-ботов. На этой неделе Google сделала функцию ИИ для анализа видео в реальном времени Project Astra доступной для группы «доверенных тестировщиков» на платформе Android.

Источники:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Новая статья: The Mermaid Mask — замечательный подводный детектив. Рецензия 51 мин.
OpenAI снизила расценки и расширила лимиты на две из трёх ИИ-модели GPT-5.6 2 ч.
ИИ привёл к перерасходу бюджета на 860 % — Amazon признала, что нейросети сделали ошибки «катастрофически дорогими» 2 ч.
Австралия запустила судебное разбирательство против Telegram — мессенджер обвиняют в распространении пропаганды терроризма 7 ч.
«Идеальное сочетание Elden Ring и Arc Raiders, но худший босс — очередь на сервер»: релиз экшена Mistfall Hunter был омрачён техническими проблемами 8 ч.
Разработчики Path of Exile 2 наконец устранили зависания, которые мучили игроков с самого релиза — виновата была Nvidia 8 ч.
Бывший инженер Microsoft создал «Диспетчер задач» для macOS 9 ч.
Павла Дурова включили в список экстремистов и террористов Росфинмониторинга 10 ч.
OpenAI подарит 100 000 учёным бесплатный доступ к своим ИИ-моделям 11 ч.
Европа заставит помечать весь ИИ-контент — новые правила вступают в силу уже в воскресенье 11 ч.
В Солнечной системе впервые обнаружен «трёхглавый» астероид — у него есть своя микролуна 2 ч.
Google выпустила ИИ-модель Gemini Robotics 2, которая научила роботов двигаться почти как люди 2 ч.
ИИ и VR ускорили строительство завода TSMC по выпуску 1,4-нм чипов — оно завершится к апрелю 2027 года 4 ч.
Kioxia начала тестовые поставки 230-слойной флеш-памяти BiCS 9-го поколения со скоростью до 4,8 Гбит/с 4 ч.
Huawei готовит 14" ноутбук MateBook Pro S — он легче 13" MacBook Air и работает на 10-ядерном процессоре Kirin XE90 4 ч.
Asus выпустила мониторы ProArt Display OLED PA279CDV и PA329CDV для творчества — 4K, 120 Гц и цена от $699 4 ч.
Исследование показало, что ИИ-агенты уже научились лучше втираться в доверие к людям, чем реальные мошенники 6 ч.
Samsung Galaxy S26 FE выйдет в начале сентября и прибавит в цене до €150 7 ч.
ИИ продолжит толкать вверх спрос на память в следующем году, но рынки DRAM и NAND будут вести себя по-разному 7 ч.
SpaceX попыталась настроить FCC против Eutelsat OneWeb, сославшись на дискриминацию в Европе 8 ч.