Сегодня 18 июня 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

ChatGPT обрёл зрение — бот научился на лету понимать видеопоток с камеры смартфона и экрана

OpenAI объявила о появлении у чат-бота ChatGPT на базе генеративного интеллекта способности обрабатывать видеопоток и говорить с пользователями о том, что он «наблюдает» с помощью камеры смартфона или компьютера, либо что видит на экране устройства. Новая функция доступна в расширенном голосовом режиме (Advanced Voice Mode).

 Источник изображения: OpenAI

Источник изображения: OpenAI

О том, что ChatGPT получит функцию компьютерного зрения, позволяющую ему «видеть» при помощи камеры смартфона пользователя или через трансляцию экрана, компания объявила в мае этого года. Теперь доступ к функции расширенного голосового режима ChatGPT с распознаванием видео получили владельцы платных подписок ChatGPT Plus, Team и Pro. По словам компании, подписчики ChatGPT Enterprise и Edu не получат эту функцию до января, и что пока нет графика по её запуску в ЕС, Швейцарии, Исландии, Норвегии и Лихтенштейне.

В недавней демонстрации в программе CNN «60 минут» президент OpenAI Грег Брокман (Greg Brockman) провел тестирование расширенного голосового режима с визуальным распознаванием с участием телеведущего Андерсона Купера (Anderson Cooper) на предмет анатомических навыков чат-бота. Когда Купер рисовал части тела на доске, ChatGPT «понимал», что тот рисует. Вместе с тем ChatGPT в этом режиме допустил ошибку в задаче по геометрии, что говорит о его склонности к галлюцинациям.

После анонса в мае компания несколько раз откладывала запуск расширенного голосового режима с визуальным распознаванием. В апреле OpenAI пообещала, что этот режим будет доступен для пользователей «в течение нескольких недель», но спустя несколько месяцев признала, что на это потребуется больше времени, чем планировалось. И когда расширенный голосовой режим запустили для некоторых пользователей в сентябре, у него не было функции компьютерного зрения.

Компании Google и Meta тоже работают над аналогичными возможностями для своих чат-ботов. На этой неделе Google сделала функцию ИИ для анализа видео в реальном времени Project Astra доступной для группы «доверенных тестировщиков» на платформе Android.

Источники:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Для Titan Quest 2 вышло «самое большое и эпичное» обновление — оно добавило в игру перевод на русский язык 46 мин.
Duke Nukem 3D, Blood, Shadow Warrior и не только: российский разработчик портировал в браузер классические шутеры на движке Build Engine 2 ч.
Epic Games пообещала, что ИИ в Unreal Engine 6 «изменит создание игр» и «сократит рутину» у разработчиков 3 ч.
Adobe добавила в Photoshop и Premiere ИИ-помощников 3 ч.
Журналисты нашли подтверждения, что новой студии создателя Yakuza больше не существует 4 ч.
Операция «Откат»: ранние инвесторы стартапа Manus вернут Цукербергу $2 млрд за заблокированную Китаем сделку 5 ч.
В ОАЭ запретили соцсети для детей до 15 лет и ввели проверку возраста 5 ч.
«Крёстный отец ИИ» назвал xAI провалом и пригрозил взрывом «пузыря ИИ» 5 ч.
Новый вариант CAPTCHA от Google требует от пользователей махать руками перед компьютером 7 ч.
Создатель Deus Ex рассказал, что произошло с многострадальной System Shock 3 8 ч.
ViewSonic выпустила 23,8-дюймовый 4K-монитор IPS с частотой 160 Гц для геймеров 14 мин.
Amazon решила конкурировать с Nvidia: компания намерена начать продажи собственных ИИ-ускорителей Trainium 2 ч.
США оштрафовали немецкую Bosch на $36 млн за поставки Huawei без разрешения 3 ч.
BYD выпустила флагманский электрический кроссовер за $35 500 — на него оформили 150 000 предзаказов 3 ч.
В США начали строить лишь половину ЦОД, которые должны заработать в 2026 году 3 ч.
Первые устройства с поддержкой HDMI 2.2 выйдут в следующем году 3 ч.
Космические дата-центры будут втрое дороже наземных — если не придумать, как сэкономить на запусках 4 ч.
Sennheiser представила TWS-наушники открытого типа Accentum Clip 5 ч.
Илон Маск может объединить SpaceX и Tesla, и помешать ему вряд ли получится 5 ч.
Сирия подозревает, что подводный интернет-кабель, связывающий страну с Египтом, повреждён в результате «систематического саботажа» 5 ч.