Сегодня 23 февраля 2026
18+
MWC 2018 2018 Computex IFA 2018
реклама
Теги → copilot vision

Microsoft научила ИИ-помощника Copilot «видеть» приложения в Windows

Разработчики из Microsoft продолжают расширять возможности своего ИИ-помощника Copilot. На этот раз они запустили функцию Copilot Vision, которая позволяет делиться контентом из браузера или приложений с виртуальным помощником. Активация этой функции позволит Copilot обучаться выполнению действий в приложениях, а также анализировать фотографии и веб-контент, просматриваемый пользователем.

 Источник изображения: Microsoft

Источник изображения: Microsoft

«Когда вы решите включить эту функцию, Copilot Vision сможет видеть то, что видите вы, и говорить с вами об этом в режиме реального времени. Он выступает в роли второй пары глаз, способных анализировать контент, помогать, когда вы теряетесь, предоставлять информацию и отвечать на ваши вопросы по ходу дела», — говорится в сообщении разработчиков.

Напомним, Microsoft начала тестировать функцию Copilot Vision в Windows в начале этого года. Теперь она стала доступна бесплатно для пользователей Windows 11 и Windows 10 в США. Хотя Copilot Vision по-прежнему остаётся одной из экспериментальных функций, для взаимодействия с ней больше не требуется наличие подписки Copilot Pro. В дополнение к этому инструмент Copilot Vision доступен в приложении ИИ-помощника Microsoft для iOS и Android.

Для активации Copilot Vision предусмотрена иконка в виде очков, которая также позволяет выбрать, что именно должен анализировать алгоритм — контент в браузере или приложении. Чтобы функция начала работать, её необходимо включить вручную. Это не похоже на спорную функцию Recall, фиксирующую практически все действия пользователя в Windows.

Microsoft научила бесплатный Copilot «подсматривать» за тем, что пользователь делает в браузере Edge

Функция Copilot Vision, которая позволяет фирменному ИИ-помощнику Microsoft просматривать и понимать происходящее на экране пользовательского устройства, теперь доступна для бесплатного использования в браузере Edge. Об этом сообщил глава подразделения Microsoft AI Мустафа Сулейман (Mustafa Suleyman).

 Источник изображения: Microsoft

Источник изображения: Microsoft

Он также рассказал, что функция Copilot Vision позволяет ИИ-алгоритму буквально видеть то, что видит пользователь на экране. Это нововведение может пригодится в разных ситуациях, например, Copilot может подсказывать выведенный на экран рецепт приготовления какого-то блюда. При этом он не будет самостоятельно переходить по ссылкам или выполнять какие-то действия от имени пользователя.

Более продвинутые общесистемные функции Copilot Vision останутся доступными только платным подписчикам Copilot Pro. С этой подпиской Copilot Vision выходит за пределы Edge и может помогать при взаимодействии с другими приложениями. Например, ИИ-помощник подскажет, как использовать ту или иную функцию Photoshop, расскажет, как пройти трудное место в игре, и др.

Для начала использования Copilot Vision в браузере необходимо с помощью Edge открыть соответствующий раздел на сайте Microsoft и подтвердить своё согласие на использование ИИ-функции. После этого будет достаточно открыть боковую панель Copilot и нажать на ярлык с изображением микрофона. Начало работы функции Copilot Vision будет сопровождаться характерным звуковым сигналом, а в браузере также немного изменится цветовое оформление. Согласно имеющимся данным, Microsoft регистрирует ответы Copilot, но не собирает пользовательскую информацию, изображения или содержание страниц во время взаимодействия с Copilot Vision. Для отключения функции достаточно закрыть окно браузера.


window-new
Soft
Hard
Тренды 🔥
Tencent закрыла новую студию скандального режиссёра Assassin’s Creed IV: Black Flag и Origins — за пять лет она не выпустила ни одной игры 37 мин.
Новый гендиректор Microsoft Gaming рассекретила личный аккаунт Xbox — геймеры заподозрили подвох 2 ч.
xAI отложила релиз новой версии Grok из-за Baldur’s Gate 3, а Илон Маск одержим идеей научить чат-бот играть в League of Legends 2 ч.
Samsung улучшит ИИ-функции Galaxy AI за счёт партнёрства с Perplexity 22-02 12:34
AMD прекратила выпускать обновления драйверов для Ryzen Z1 Extreme 22-02 11:59
Активисты Stop Killing Games будут «кошмарить» издателей за закрытие старых игр на юридической основе 22-02 10:55
Новая статья: Reanimal — мастер-класс, но не без изъянов. Рецензия 22-02 00:09
Не только Cyberpunk 2077: на мощных Android-устройствах заработали AAA-игры для ПК, но с ограничениями 21-02 16:59
Apple создаёт локального ИИ-агента для iPhone, который сможет управлять приложениями за пользователя 21-02 13:50
Roblox обеспечила больше роста игровой индустрии, чем Steam, PlayStation и Fortnite вместе взятые 21-02 13:43
Акции Nvidia упёрлись в потолок и даже отличный квартальный отчёт вряд ли их поднимет — скорее наоборот 6 мин.
Плееры iPod вернулись в моду — продажи подскочили на 20–25 %, и вот почему 11 мин.
Китайская CXMT обрушила цены на DDR4 — вдвое дешевле Samsung и SK hynix 15 мин.
Спрос на виниловые пластинки в России взлетел на 15 % в 2025 году 2 ч.
Чтобы стать умным, человеку нужно 20 лет и тонны еды: Альтман сравнил энергозатраты ИИ и человека 4 ч.
США отправят «миссионеров ИИ» по всему миру — Трамп запустил Tech Corps, чтобы укрепить влияние и сдержать Китай 4 ч.
Сооснователи Kingston Technology в этом году стали богаче на 44 % из-за бума ИИ 7 ч.
Глава SK Group заявил, что из-за дефицита памяти некоторые производители ПК и смартфонов могут не выжить 8 ч.
Новая статья: AGI: и хочется, и колется 14 ч.
Цена модулей DDR5 в Европе откатилась на 10-15 %, несмотря на продолжающийся дефицит 18 ч.