Сегодня 12 ноября 2025
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

ChatGPT обрёл зрение — бот научился на лету понимать видеопоток с камеры смартфона и экрана

OpenAI объявила о появлении у чат-бота ChatGPT на базе генеративного интеллекта способности обрабатывать видеопоток и говорить с пользователями о том, что он «наблюдает» с помощью камеры смартфона или компьютера, либо что видит на экране устройства. Новая функция доступна в расширенном голосовом режиме (Advanced Voice Mode).

 Источник изображения: OpenAI

Источник изображения: OpenAI

О том, что ChatGPT получит функцию компьютерного зрения, позволяющую ему «видеть» при помощи камеры смартфона пользователя или через трансляцию экрана, компания объявила в мае этого года. Теперь доступ к функции расширенного голосового режима ChatGPT с распознаванием видео получили владельцы платных подписок ChatGPT Plus, Team и Pro. По словам компании, подписчики ChatGPT Enterprise и Edu не получат эту функцию до января, и что пока нет графика по её запуску в ЕС, Швейцарии, Исландии, Норвегии и Лихтенштейне.

В недавней демонстрации в программе CNN «60 минут» президент OpenAI Грег Брокман (Greg Brockman) провел тестирование расширенного голосового режима с визуальным распознаванием с участием телеведущего Андерсона Купера (Anderson Cooper) на предмет анатомических навыков чат-бота. Когда Купер рисовал части тела на доске, ChatGPT «понимал», что тот рисует. Вместе с тем ChatGPT в этом режиме допустил ошибку в задаче по геометрии, что говорит о его склонности к галлюцинациям.

После анонса в мае компания несколько раз откладывала запуск расширенного голосового режима с визуальным распознаванием. В апреле OpenAI пообещала, что этот режим будет доступен для пользователей «в течение нескольких недель», но спустя несколько месяцев признала, что на это потребуется больше времени, чем планировалось. И когда расширенный голосовой режим запустили для некоторых пользователей в сентябре, у него не было функции компьютерного зрения.

Компании Google и Meta тоже работают над аналогичными возможностями для своих чат-ботов. На этой неделе Google сделала функцию ИИ для анализа видео в реальном времени Project Astra доступной для группы «доверенных тестировщиков» на платформе Android.

Источники:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Основатели Fireflies.ai целый год выдавали себя за ИИ — теперь стартап стоит $1 млрд 28 мин.
«Взломали пространство и время»: CD Projekt Red раскрыла секрет появления в The Witcher 3: Wild Hunt звезды «Игры престолов» 2 ч.
Ведущие разработчики ИИ продолжают публиковать секретные данные на GitHub 3 ч.
ChatGPT не имел права цитировать немецкие песни, решил немецкий суд 3 ч.
Школьный экшен Agefield High: Rock the School в духе Bully позволит вновь почувствовать себя старшеклассником — новый трейлер и подробности 4 ч.
Orion soft представил в zVirt 4.5 папки виртуальных машин и возможность быстрого «переезда» с любых систем виртуализации 5 ч.
ByteDance запустила самого дешёвого ИИ-помощника программиста — от $1,3 в месяц 5 ч.
Все этим занимаются: глава Nexon встал на защиту использования ИИ в Arc Raiders 5 ч.
У «Google Карт» появился режим энергосбережения, но большинство смартфонов его не получит 6 ч.
Google Pixel научились распознавать мошенников в чатах и делать ИИ-сводки уведомлений 6 ч.
Их топят, роняют и разбивают о стену: Honor выяснила, как россияне чаще всего ломают смартфоны 19 мин.
ГК Key Point построит коммерческие дата-центры в Санкт-Петербурге и Дагестане 21 мин.
«Земля уходит из-под ног» — производителей аккумуляторов накрыл кризис перепроизводства 29 мин.
Sony представила 27-дюймовый монитор для PS5 с зарядным крюком для контроллера DualSense 38 мин.
Kyocera показала технологию подводной оптической передачи данных UWOC: до 5,2 Гбит/с в пресной воде 43 мин.
Caviar представила тройку золотых iPhone 17 Pro по цене до 6 млн рублей: Palmette, Bitcoin и Solar 45 мин.
Microsoft инвестирует $10 млрд в ИИ ЦОД в Португалии 56 мин.
Планшеты снова не в моде: мировые поставки продолжают падать, особенно у мелких производителей 2 ч.
Китай заявил о прорыве в атомном судоходстве — турбины теперь работают на сверхкритическом CO₂ 2 ч.
Квартальная выручка CoreWeave подскочила более чем в два раза, а объём законтрактованных мощностей вырос до 2,9 ГВт 2 ч.