Сегодня 01 апреля 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

ChatGPT обрёл зрение — бот научился на лету понимать видеопоток с камеры смартфона и экрана

OpenAI объявила о появлении у чат-бота ChatGPT на базе генеративного интеллекта способности обрабатывать видеопоток и говорить с пользователями о том, что он «наблюдает» с помощью камеры смартфона или компьютера, либо что видит на экране устройства. Новая функция доступна в расширенном голосовом режиме (Advanced Voice Mode).

 Источник изображения: OpenAI

Источник изображения: OpenAI

О том, что ChatGPT получит функцию компьютерного зрения, позволяющую ему «видеть» при помощи камеры смартфона пользователя или через трансляцию экрана, компания объявила в мае этого года. Теперь доступ к функции расширенного голосового режима ChatGPT с распознаванием видео получили владельцы платных подписок ChatGPT Plus, Team и Pro. По словам компании, подписчики ChatGPT Enterprise и Edu не получат эту функцию до января, и что пока нет графика по её запуску в ЕС, Швейцарии, Исландии, Норвегии и Лихтенштейне.

В недавней демонстрации в программе CNN «60 минут» президент OpenAI Грег Брокман (Greg Brockman) провел тестирование расширенного голосового режима с визуальным распознаванием с участием телеведущего Андерсона Купера (Anderson Cooper) на предмет анатомических навыков чат-бота. Когда Купер рисовал части тела на доске, ChatGPT «понимал», что тот рисует. Вместе с тем ChatGPT в этом режиме допустил ошибку в задаче по геометрии, что говорит о его склонности к галлюцинациям.

После анонса в мае компания несколько раз откладывала запуск расширенного голосового режима с визуальным распознаванием. В апреле OpenAI пообещала, что этот режим будет доступен для пользователей «в течение нескольких недель», но спустя несколько месяцев признала, что на это потребуется больше времени, чем планировалось. И когда расширенный голосовой режим запустили для некоторых пользователей в сентябре, у него не было функции компьютерного зрения.

Компании Google и Meta тоже работают над аналогичными возможностями для своих чат-ботов. На этой неделе Google сделала функцию ИИ для анализа видео в реальном времени Project Astra доступной для группы «доверенных тестировщиков» на платформе Android.

Источники:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Anthropic вспомнила об авторских правах — она пытается смягчить последствия утечки кода Claude Code 9 мин.
Официально: апрельская подборка PS Plus включает пять игр вместо трёх, но есть нюанс 53 мин.
Амбициозный боевик Saros от разработчиков Returnal не опоздает к релизу — игра ушла на золото почти за месяц до выхода 2 ч.
Ollama получила поддержку аппаратного ускорения на чипах Apple M5 — при наличии 32 Гбайт памяти 3 ч.
Создатель Disco Elysium рассказал, при каком условии выйдет Disco Elysium 2 3 ч.
ЕС решил запретить ИИ-контент в официальных материалах 4 ч.
Эксперты призвали Google не показывать детям ИИ-контент на YouTube 4 ч.
Microsoft выпустила экстренное обновление для Windows 11, призванное исправить ошибки мартовского накопительного обновления 4 ч.
Heroes of Might & Magic: Olden Era появится в раннем доступе уже в апреле 4 ч.
Microsoft грозит SMS: в Azure увидели угрозу облачному рынку Великобритании 5 ч.
AUO заявила о разработке первого в мире 24″ FHD-монитора с частотой обновления 800 Гц 5 мин.
Ажиотажный рост цен на оперативную память болезненно сказался на доступности Raspberry Pi 18 мин.
Intel выкупит оставшуюся долю в своей ирландской фабрике Fab 34 за $14,2 млрд 22 мин.
Спутник Starlink разрушился на орбите, но сохранился его «портрет», сделанный незадолго до столкновения 3 ч.
К 2030 году российский рынок электромобилей может достичь 100 000 шт./год 3 ч.
Японцы построили генератор запахов для VR-гарнитур 5 ч.
Дефицит памяти привёл к выпуску 3-Гбайт версии Raspberry Pi 4 и повышению цены Raspberry Pi 500+ сразу на $150 5 ч.
Франция выкупила разработчика суперкомпьютеров Bull у Atos 6 ч.
Российские академики одобрили концепцию российского сегмента совместной с Китаем лунной станции 6 ч.
Десять крупнейших бесфабричных разработчиков чипов в прошлом году увеличили выручку на 44 % 7 ч.