Сегодня 31 января 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

ChatGPT обрёл зрение — бот научился на лету понимать видеопоток с камеры смартфона и экрана

OpenAI объявила о появлении у чат-бота ChatGPT на базе генеративного интеллекта способности обрабатывать видеопоток и говорить с пользователями о том, что он «наблюдает» с помощью камеры смартфона или компьютера, либо что видит на экране устройства. Новая функция доступна в расширенном голосовом режиме (Advanced Voice Mode).

 Источник изображения: OpenAI

Источник изображения: OpenAI

О том, что ChatGPT получит функцию компьютерного зрения, позволяющую ему «видеть» при помощи камеры смартфона пользователя или через трансляцию экрана, компания объявила в мае этого года. Теперь доступ к функции расширенного голосового режима ChatGPT с распознаванием видео получили владельцы платных подписок ChatGPT Plus, Team и Pro. По словам компании, подписчики ChatGPT Enterprise и Edu не получат эту функцию до января, и что пока нет графика по её запуску в ЕС, Швейцарии, Исландии, Норвегии и Лихтенштейне.

В недавней демонстрации в программе CNN «60 минут» президент OpenAI Грег Брокман (Greg Brockman) провел тестирование расширенного голосового режима с визуальным распознаванием с участием телеведущего Андерсона Купера (Anderson Cooper) на предмет анатомических навыков чат-бота. Когда Купер рисовал части тела на доске, ChatGPT «понимал», что тот рисует. Вместе с тем ChatGPT в этом режиме допустил ошибку в задаче по геометрии, что говорит о его склонности к галлюцинациям.

После анонса в мае компания несколько раз откладывала запуск расширенного голосового режима с визуальным распознаванием. В апреле OpenAI пообещала, что этот режим будет доступен для пользователей «в течение нескольких недель», но спустя несколько месяцев признала, что на это потребуется больше времени, чем планировалось. И когда расширенный голосовой режим запустили для некоторых пользователей в сентябре, у него не было функции компьютерного зрения.

Компании Google и Meta тоже работают над аналогичными возможностями для своих чат-ботов. На этой неделе Google сделала функцию ИИ для анализа видео в реальном времени Project Astra доступной для группы «доверенных тестировщиков» на платформе Android.

Источники:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
ИИ-агенты в «бесчеловечной» соцсети Moltbook основали собственную религию — «панцифарианство» 11 мин.
Соцсети вскоре столкнутся с массовыми набегами ИИ-агентов, предупредили учёные 2 ч.
Apple проигрывает борьбу за ИИ-специалистов — ценные кадры уходят в Meta и Google DeepMind 3 ч.
Instagram разрешит удалять себя из чужих списков «Близкие друзья» 3 ч.
Экс-инженера Google осудили за кражу коммерческих тайн для Китая 4 ч.
ФСТЭК России опубликовала рекомендации по безопасной настройке Samba 6 ч.
Обещанная Павлом Дуровым интеграция Grok c Telegram до сих пор не случилась и, похоже, уже никогда не случится 9 ч.
Запустилась соцсеть Moltbook, где общаются только ИИ-агенты — людям разрешили только наблюдать 13 ч.
Новая статья: Arknights: Endfield — если бы Satisfactory была китайской гачей. Рецензия 19 ч.
Хардкорный шутер Road to Vostok о выживании на границе Финляндии и России скоро ворвётся в ранний доступ Steam — дата выхода и новый трейлер 20 ч.
Цена прогресса: Oracle не нашла денег на новые ЦОД и может уволить до 30 тысяч человек 15 мин.
Очередная группа космических туристов отправится на МКС в январе 2027 года — Axiom и NASA подписали контракт 4 ч.
SpaceX завершила 2025 год с прибылью $8 млрд — оценка к IPO может достичь $1,5 трлн 6 ч.
NASA впервые доверило ИИ управление марсоходом — он проехал почти полкилометра 6 ч.
Спутниковый интернет Amazon забуксовал — компания попросила больше времени на развёртывание Leo 6 ч.
8K оказался почти никому не нужен — LG остановила выпуск телевизоров 8K OLED и 8K LCD 6 ч.
Мегасделка между OpenAI и Nvidia на $100 млрд застопорилась из-за сомнений Nvidia 7 ч.
SpaceX запросила разрешение на запуск миллиона спутников для сети орбитальных ЦОД 7 ч.
После провального ИИ-гаджета Rabbit готовит ИИ-ноутбук Cyberdeck для вайб-кодинга 8 ч.
Kioxia намерена нарастить долю рынка NAND, пока конкуренты заняты памятью для ИИ 11 ч.