Сегодня 12 сентября 2025
18+
MWC 2018 2018 Computex IFA 2018
реклама
Новости Software

ChatGPT научился понимать голосовые команды и работать с изображениями

OpenAI расширила варианты взаимодействия с ChatGPT. Новая версия чат-бота теперь принимает в качестве промтов (подсказок) не только текст, но также изображения и голосовые команды. Для коммерческих пользователей новые возможности станут доступны в ближайшие две недели, а остальным придётся какое-то время подождать.

 Источник изображения: The Verge

Источник изображения: The Verge

Общение голосом с ChatGPT в чём-то похоже на разговор с любым голосовым помощником, но, по утверждению OpenAI, качество ответов значительно выше благодаря улучшенной базовой технологии. Пользователь нажимает кнопку и произносит вопрос, ChatGPT преобразует его в текст и передаёт в большую языковую модель, получает ответ, преобразует его обратно в речь и произносит ответ вслух.

Новые возможности ChatGPT опираются на большую языковую модель Whisper, которая выполняет значительную часть работы по преобразованию речи в текст и обратно. По утверждению OpenAI, новая модель может генерировать «человеческий голос из текста и образца речи длиной в несколько секунд». Пока доступно пять вариантов голоса ChatGPT, но OpenAI видит в этой модели гораздо больший потенциал.

Возможность создать синтезированный голос любого человека, опираясь всего на несколько секунд его речи, даёт широкое поле деятельности для киберпреступников, признаёт OpenAI в анонсе новых функций: «Это новые риски, такие как возможность злоумышленников выдать себя за общественных деятелей или совершить мошенничество». По утверждению компании, модель недоступна для широкого использования именно по этой причине: OpenAI планирует ограничить модель конкретными вариантами использования и партнёрскими соглашениями.

Что касается запроса в ChatGPT при помощи изображения, пользователю достаточно сфотографировать или нарисовать предмет своего интереса и отправить боту. В процессе общения можно применять текстовые или голосовые подсказки, чтобы уточнить запрос или ограничить область поиска.

Очевидно, что использование изображений в качестве подсказки для чат-бота также имеет свои потенциальные проблемы. В первую очередь это касается запроса о личности человека на фотографии, хотя OpenAI заявляет, что ограничила «способность ChatGPT анализировать и делать прямые заявления о людях» как по соображениям точности, так и по соображениям конфиденциальности.

Спустя почти год после первого запуска ChatGPT OpenAI продолжает расширять границы применения и использования своего чат-бота, пытаясь избежать связанных с ним проблем и недоработок. В частности, компания намеренно ограничивает возможности своих новых ИИ-моделей. Но такой подход не будет работать вечно. По мере того, как все больше людей используют голосовое управление и поиск изображений, а ChatGPT становится мультимодальным и полезным виртуальным помощником, удерживать ИИ в рамках будет все труднее и труднее.

Источник:

Если вы заметили ошибку — выделите ее мышью и нажмите CTRL+ENTER.
Материалы по теме

window-new
Soft
Hard
Тренды 🔥
Dying Light: The Beast не выйдет 19 сентября — игра станет доступна на день раньше 9 мин.
Первый патч для Hollow Knight: Silksong вышел раньше времени — он сделал игру чуть проще и устранил полезную лазейку 52 мин.
Включение в GeForce Now доступа к «облачным» GeForce RTX 5080 обвалило сервис 58 мин.
Федеральная торговая комиссия США заподозрила Amazon и Google в обмане рекламодателей 2 ч.
Resident Evil 7, Resident Evil Village и Resident Evil Requiem выйдут на Nintendo Switch 2 в один и тот же день 3 ч.
Microsoft удалось избежать штрафа в ЕС, пообещав изъять Teams из офисных пакетов 3 ч.
«Будет либо невероятной, либо худшей в истории»: новый трейлер наконец подтвердил дату релиза Metroid Prime 4: Beyond и насторожил фанатов 4 ч.
Стильный трейлер раскрыл дату выхода релизной версии Hades 2 — ждать осталось недолго 5 ч.
Alibaba выпустила ИИ-модель Qwen3-Next — она десятикратно мощнее предшественницы 6 ч.
Гейб Ньюэлл признался в любви к Dota 2 и её фанатам, несмотря на регулярные оскорбления в свой адрес 8 ч.
GeForce RTX 5090 FE и RTX 5080 FE внезапно исчезли из официальных магазинов Nvidia в ряде стран 4 мин.
Мобильный Ryzen AI Max+ 395 нашёл пристанище в рабочих микростанциях — китайцы наделали десятки моделей 2 ч.
Спасаясь от банкротства, Kodak выпустила 30-граммовую 30-долларовую ностальгическую фотокамеру Charmerа 3 ч.
Apple пришлось отложить выпуск iPhone Air в Китае из-за eSIM 3 ч.
Разобрать Google Pixel 10 Pro XL оказалось проще простого — возможно, это самый ремонтопригодный флагман 3 ч.
Gigabyte представила док-станцию Aorus AI BOX с GeForce RTX 5060 Ti 16GB и портом Thunderbolt 5 4 ч.
SK hynix первой завершила разработку HBM4 и готова начинать её выпуск — Samsung и Micron снова отстали 5 ч.
«Аквариус» представил российские серверы Aquarius AQserv AS на базе Intel Xeon Ice Lake-SP 5 ч.
С начала года Intel потеряла уже второго «титана отрасли» — ведущего разработчика архитектуры x86 6 ч.
Доля Arm на рынке серверных CPU внезапно достигла 25 %, и помогла ей в этом Nvidia 6 ч.