Сегодня 23 февраля 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → copilot vision

Microsoft научила ИИ-помощника Copilot «видеть» приложения в Windows

Разработчики из Microsoft продолжают расширять возможности своего ИИ-помощника Copilot. На этот раз они запустили функцию Copilot Vision, которая позволяет делиться контентом из браузера или приложений с виртуальным помощником. Активация этой функции позволит Copilot обучаться выполнению действий в приложениях, а также анализировать фотографии и веб-контент, просматриваемый пользователем.

 Источник изображения: Microsoft

Источник изображения: Microsoft

«Когда вы решите включить эту функцию, Copilot Vision сможет видеть то, что видите вы, и говорить с вами об этом в режиме реального времени. Он выступает в роли второй пары глаз, способных анализировать контент, помогать, когда вы теряетесь, предоставлять информацию и отвечать на ваши вопросы по ходу дела», — говорится в сообщении разработчиков.

Напомним, Microsoft начала тестировать функцию Copilot Vision в Windows в начале этого года. Теперь она стала доступна бесплатно для пользователей Windows 11 и Windows 10 в США. Хотя Copilot Vision по-прежнему остаётся одной из экспериментальных функций, для взаимодействия с ней больше не требуется наличие подписки Copilot Pro. В дополнение к этому инструмент Copilot Vision доступен в приложении ИИ-помощника Microsoft для iOS и Android.

Для активации Copilot Vision предусмотрена иконка в виде очков, которая также позволяет выбрать, что именно должен анализировать алгоритм — контент в браузере или приложении. Чтобы функция начала работать, её необходимо включить вручную. Это не похоже на спорную функцию Recall, фиксирующую практически все действия пользователя в Windows.

Microsoft научила бесплатный Copilot «подсматривать» за тем, что пользователь делает в браузере Edge

Функция Copilot Vision, которая позволяет фирменному ИИ-помощнику Microsoft просматривать и понимать происходящее на экране пользовательского устройства, теперь доступна для бесплатного использования в браузере Edge. Об этом сообщил глава подразделения Microsoft AI Мустафа Сулейман (Mustafa Suleyman).

 Источник изображения: Microsoft

Источник изображения: Microsoft

Он также рассказал, что функция Copilot Vision позволяет ИИ-алгоритму буквально видеть то, что видит пользователь на экране. Это нововведение может пригодится в разных ситуациях, например, Copilot может подсказывать выведенный на экран рецепт приготовления какого-то блюда. При этом он не будет самостоятельно переходить по ссылкам или выполнять какие-то действия от имени пользователя.

Более продвинутые общесистемные функции Copilot Vision останутся доступными только платным подписчикам Copilot Pro. С этой подпиской Copilot Vision выходит за пределы Edge и может помогать при взаимодействии с другими приложениями. Например, ИИ-помощник подскажет, как использовать ту или иную функцию Photoshop, расскажет, как пройти трудное место в игре, и др.

Для начала использования Copilot Vision в браузере необходимо с помощью Edge открыть соответствующий раздел на сайте Microsoft и подтвердить своё согласие на использование ИИ-функции. После этого будет достаточно открыть боковую панель Copilot и нажать на ярлык с изображением микрофона. Начало работы функции Copilot Vision будет сопровождаться характерным звуковым сигналом, а в браузере также немного изменится цветовое оформление. Согласно имеющимся данным, Microsoft регистрирует ответы Copilot, но не собирает пользовательскую информацию, изображения или содержание страниц во время взаимодействия с Copilot Vision. Для отключения функции достаточно закрыть окно браузера.


window-new
Soft
Hard
Тренды 🔥
«Даже местные разработчики ничего подобного не делали»: трейлер Forza Horizon 6 с живописными видами Японии впечатлил геймеров 7 мин.
На Android вышел ИИ-сервис диктовки Wispr Flow — без смены клавиатуры, более 100 языков, бесплатно и без лимитов 2 ч.
Tencent закрыла новую студию скандального режиссёра Assassin’s Creed IV: Black Flag и Origins — за пять лет она не выпустила ни одной игры 2 ч.
Новый гендиректор Microsoft Gaming рассекретила личный аккаунт Xbox — геймеры заподозрили подвох 3 ч.
xAI отложила релиз новой версии Grok из-за Baldur’s Gate 3, а Илон Маск одержим идеей научить чат-бот играть в League of Legends 3 ч.
Samsung улучшит ИИ-функции Galaxy AI за счёт партнёрства с Perplexity 22-02 12:34
AMD прекратила выпускать обновления драйверов для Ryzen Z1 Extreme 22-02 11:59
Активисты Stop Killing Games будут «кошмарить» издателей за закрытие старых игр на юридической основе 22-02 10:55
Новая статья: Reanimal — мастер-класс, но не без изъянов. Рецензия 22-02 00:09
Не только Cyberpunk 2077: на мощных Android-устройствах заработали AAA-игры для ПК, но с ограничениями 21-02 16:59
Honor ворвётся на рынок человекоподобных роботов — первенца покажут уже на этой неделе 2 ч.
Разработчики человекоподобных роботов теперь стараются делать их милыми и больше похожими на людей 2 ч.
Индустриальный компьютер OnLogic Factor 101 получил чип Qualcomm QCS6490 и порт 10GbE 2 ч.
Акции Nvidia упёрлись в потолок и даже отличный квартальный отчёт вряд ли их поднимет — скорее наоборот 2 ч.
Плееры iPod вернулись в моду — продажи подскочили на 20–25 %, и вот почему 2 ч.
Китайская CXMT обрушила цены на DDR4 — вдвое дешевле Samsung и SK hynix 2 ч.
Спрос на виниловые пластинки в России взлетел на 15 % в 2025 году 3 ч.
США отправят «миссионеров ИИ» по всему миру — Трамп запустил Tech Corps, чтобы укрепить влияние и сдержать Китай 5 ч.
Сооснователи Kingston Technology в этом году стали богаче на 44 % из-за бума ИИ 8 ч.
Глава SK Group заявил, что из-за дефицита памяти некоторые производители ПК и смартфонов могут не выжить 9 ч.