Microsoft объявила о запуске Copilot Vision для Windows — расширения функций своего ИИ-ассистента, которое позволяет делиться экраном или отдельными приложениями для получения помощи в реальном времени. Пользователи могут выбрать определенное окно браузера или приложение, чтобы Copilot Vision анализировала увиденное и помогала с выполнением различных задач, например, объясняла возможности Adobe Photoshop или разбиралась в веб-страницах и фотографиях.
Copilot Vision работает в приложении Copilot на Windows и активируется через специальную иконку в виде очков. Модель начинает взаимодействовать только после того, как пользователь сознательно предоставит доступ к определенному окну или программе — постоянного отслеживания, как в функции Recall, здесь нет. После активации Copilot может выделять важные элементы на экране, предлагать подсказки и отвечать на вопросы.
Запуск Copilot Vision происходит бесплатно для пользователей Windows 10 и Windows 11 в США, и для использования этой функции не требуется подписка Copilot Pro. Модель остается частью экспериментальной инициативы Copilot Labs, но доступна для широкого круга пользователей.
Кроме Windows, Copilot Vision также можно использовать на мобильных устройствах под управлением iOS и Android. Для пользователей это открывает дополнительные возможности получать подсказки или разъяснения во время работы с различными приложениями или просмотра контента, что может упростить выполнение повседневных задач.