Сегодня 07 мая 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

ChatGPT обрёл зрение — бот научился на лету понимать видеопоток с камеры смартфона и экрана

OpenAI объявила о появлении у чат-бота ChatGPT на базе генеративного интеллекта способности обрабатывать видеопоток и говорить с пользователями о том, что он «наблюдает» с помощью камеры смартфона или компьютера, либо что видит на экране устройства. Новая функция доступна в расширенном голосовом режиме (Advanced Voice Mode).

 Источник изображения: OpenAI

Источник изображения: OpenAI

О том, что ChatGPT получит функцию компьютерного зрения, позволяющую ему «видеть» при помощи камеры смартфона пользователя или через трансляцию экрана, компания объявила в мае этого года. Теперь доступ к функции расширенного голосового режима ChatGPT с распознаванием видео получили владельцы платных подписок ChatGPT Plus, Team и Pro. По словам компании, подписчики ChatGPT Enterprise и Edu не получат эту функцию до января, и что пока нет графика по её запуску в ЕС, Швейцарии, Исландии, Норвегии и Лихтенштейне.

В недавней демонстрации в программе CNN «60 минут» президент OpenAI Грег Брокман (Greg Brockman) провел тестирование расширенного голосового режима с визуальным распознаванием с участием телеведущего Андерсона Купера (Anderson Cooper) на предмет анатомических навыков чат-бота. Когда Купер рисовал части тела на доске, ChatGPT «понимал», что тот рисует. Вместе с тем ChatGPT в этом режиме допустил ошибку в задаче по геометрии, что говорит о его склонности к галлюцинациям.

После анонса в мае компания несколько раз откладывала запуск расширенного голосового режима с визуальным распознаванием. В апреле OpenAI пообещала, что этот режим будет доступен для пользователей «в течение нескольких недель», но спустя несколько месяцев признала, что на это потребуется больше времени, чем планировалось. И когда расширенный голосовой режим запустили для некоторых пользователей в сентябре, у него не было функции компьютерного зрения.

Компании Google и Meta тоже работают над аналогичными возможностями для своих чат-ботов. На этой неделе Google сделала функцию ИИ для анализа видео в реальном времени Project Astra доступной для группы «доверенных тестировщиков» на платформе Android.

Источники:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
На «Яндекс» пожаловались в ФАС из-за изменений в поисковой выдаче 26 мин.
У Роскомнадзора нет ни планов, ни оснований для блокировки GTA, Red Dead Redemption, Battlefield, Fortnite и других популярных в России игр 55 мин.
Даже хакеры устали от нейросетей: их форумы захлестнула ИИ-бурда 2 ч.
Google DeepMind будет обучать ИИ в космической песочнице EVE Online 2 ч.
Anthropic занялась повышением привлекательности ИИ-бота Claude для простых пользователей 2 ч.
«Экономил ради этого целый год»: трейлер кроссовера Wuthering Waves и Cyberpunk: Edgerunners привёл фанатов в восторг 3 ч.
Спрос на ИИ-услуги Anthropic в первом квартале взлетел в 80 раз, поэтому ей и понадобился суперкомпьютер Маска 3 ч.
Новый хит Capcom: продажи экспериментального боевика Pragmata достигли двух миллионов копий 4 ч.
Google закрыла разработку ИИ-агента для сложных задач в интернете Project Mariner 4 ч.
Найден новый способ обхода шифрования Google Chrome для кражи паролей 4 ч.
Мировые продажи планшетов замерли, а хромбуков — резко обвалились 10 мин.
Palit подтвердила, что Galax, KFA2 и HOF уже работают над будущими поколениями видеокарт 33 мин.
Arm рассчитывает заработать миллиарды долларов на серверных процессорах Arm AGI 59 мин.
TSMC вкладывается в морские ветряки, чтобы не упереться в дефицит энергии для выпуска чипов 2 ч.
Meta обжаловала вердикт на $4,2 млн по делу о зависимости от соцсетей и вреде для психики 2 ч.
Переговоры профсоюза и руководства Samsung провалились — сотрудники требуют до 15 % прибыли 2 ч.
ИИ научили следить за животными в дикой природе — он разбирает миллионы снимков за дни вместо месяцев 2 ч.
Ускоритель AMD Instinct MI430X оказался вшестеро быстрее Nvidia Rubin, но он не для ИИ 3 ч.
Anthropic достанутся все мощности ИИ-кластера xAI Colossus 1 3 ч.
Оптимизм руководства AMD по поводу серверных CPU разогнал акции — плюс 19 % за день 3 ч.