Copilot Vision: теперь ИИ-помощник в Windows 11 может «видеть» экран.
Copilot Vision позволяет ИИ-помощнику от Microsoft анализировать содержимое приложений на экране в режиме реального времени, чтобы оказывать немедленную помощь, меняя тем самым способ взаимодействия пользователей с компьютерами.
Компания Microsoft официально выпустила Copilot Vision для пользователей Windows 11 и Windows 10 в США, предоставив своему ИИ-помощнику возможность «видеть» и «понимать» контент, отображаемый на экране. Эта функция, ранее доступная только участникам программы Windows Insider, теперь доступна в версии приложения Copilot 1.25061.104.0 и выше.
По сути, Copilot Vision позволяет пользователям делиться окном приложения или всем экраном с Copilot. Затем ИИ может проанализировать контекст и предоставить ответы, рекомендации или информацию, непосредственно связанную с тем, что вы делаете, открывая новый и более интуитивный способ взаимодействия с компьютерами.
Как это работает: Когда ИИ может «видеть» экран.
Copilot Vision — это дополнительная функция, требующая активации пользователем. После включения вы можете выбрать демонстрацию окна браузера, определенного приложения или всего рабочего стола. Затем чат-бот с искусственным интеллектом обрабатывает полученное изображение, чтобы понять контекст, что может помочь в таких задачах, как объяснение того, как использовать ту или иную функцию в программном приложении, или ответы на вопросы о просматриваемом контенте.
Эта функция работает в большинстве приложений и веб-сайтов, но будет доступна только для контента, защищенного технологией управления цифровыми правами (DRM).
Инструкции по активации Copilot Vision в Windows 11
Чтобы начать использовать Copilot Vision на компьютере с Windows, выполните следующие простые действия, открыв какое-либо приложение или браузер:
- Откройте приложение Copilot с панели задач.
- Нажмите на значок лупы («Поделиться экраном с Copilot») рядом с диалоговым окном ввода текста.
- Выберите окно приложения или экран, который хотите показать, затем нажмите кнопку.Делиться.
- Задавайте вопросы или обращайтесь в службу поддержки Copilot.
- После завершения нажмите кнопку.ОстанавливатьсяВ завершение сессии обмена опытом.
Полностью интегрирован в браузер Microsoft Edge.
Пользователи Microsoft Edge также могут с удобством использовать Copilot Vision прямо в браузере:
- Откройте веб-сайт, который вы хотите, чтобы Copilot проанализировал.
- Нажмите на значок Copilot в правом верхнем углу браузера.
- Начать голосовой разговор можно, нажав на значок микрофона; функция Vision будет включена по умолчанию.
- В качестве альтернативы вы можете нажать на значок лупы, чтобы вручную включить или выключить демонстрацию экрана.
Чтобы полностью отключить эту функцию в Edge, вы можете перейти на страницу настроек.edge://settings/appearance/copilotAndSidebarи снимите флажок с опции "Разрешить Copilot Vision просматривать ваш веб-сайт".
Конфиденциальность и безопасность: в чем заключается обязательство Microsoft?
Microsoft утверждает, что в Copilot Vision приоритет отдается конфиденциальности. Эта функция не работает постоянно; она собирает данные только тогда, когда пользователь активно инициирует сеанс обмена данными, и автоматически отключается после периода бездействия.
Компания также заявила, что изображения и аудиозаписи пользователей не записываются и не хранятся. Однако голосовые разговоры будут расшифровываться и сохраняться в истории чата, которую пользователи могут удалить в любое время. Что касается веб-версии, Microsoft обязуется не собирать данные и не использовать их для обучения ИИ.
Будущее и другие платформы
Помимо Windows, Copilot Vision также доступен на iOS и Android, но для его использования требуется подписка на тарифный план Copilot Pro. На этих платформах ИИ может получать доступ как к экрану, так и к камере устройства.
Microsoft также тестирует новую функцию для Copilot, которая позволяет пользователям искать, открывать и задавать вопросы к файлам, хранящимся непосредственно на их компьютере, обещая сделать этого ИИ-помощника еще более полезным в будущем.
