Наведите — и получите ответ: как работает визуальный ИИ в Windows 11

В предварительной версии Windows 11 Insider Preview появилась необычная функция, которая сразу привлекла внимание тестировщиков. Теперь при наведении курсора на значок открытого приложения на панели задач появляется новая кнопка — "Поделиться с Copilot". С её помощью можно отправить содержимое окна в систему Copilot Vision, где искусственный интеллект проанализирует изображение и даст пояснения.

Как работает Copilot Vision

Copilot Vision предназначен для распознавания и анализа картинок, которые находятся на экране компьютера. Пользователю достаточно кликнуть на новую кнопку, чтобы ИИ "сфотографировал" содержимое окна, выделил ключевые объекты и предоставил дополнительную информацию.

Например, на фото может быть скульптура или известная личность. Copilot не только определит объект, но и предложит обсудить его в чате или открыть обучающие материалы, связанные с темой. По сути, это интеграция визуального поиска Bing Image Search и возможностей чат-бота Microsoft Copilot в рамках операционной системы.

Где уже есть кнопки Copilot

Сегодня кнопки Copilot встроены в разные части Windows и фирменные приложения Microsoft:

• на панели задач;

• в Microsoft Paint;

• в "Блокноте";

• на клавиатуре;

• даже на передней панели некоторых новых ПК.

В свежей тестовой сборке Windows 11 появилась и ещё одна опция: перевод текста прямо с экрана через Copilot.

Что говорит Microsoft

Компания уточняет, что пока это лишь эксперимент.

Microsoft заявляет, что просто "тестирует эту функцию на панели задач", поэтому в следующей сборке от неё могут отказаться, пишет The Verge.

Это означает, что в финальной версии Windows 11 мы можем так и не увидеть "Поделиться с Copilot", если тест покажет слабый интерес пользователей.

Сравнение Copilot Vision с другими инструментами

Советы шаг за шагом: как попробовать Copilot Vision

1. Установите Insider Preview Windows 11 и обновите систему до актуальной сборки.

2. Наведите курсор на приложение на панели задач.

3. Найдите кнопку "Поделиться с Copilot" и нажмите её.

4. Дождитесь, пока Copilot Vision проанализирует изображение.

5. Ознакомьтесь с результатом: чат с ИИ или обучающие материалы.

6. Используйте функцию перевода текста для проверки её возможностей.

Ошибка → Последствие → Альтернатива

• Ошибка: ожидать, что функция уже полностью работает.

• Последствие: разочарование из-за недоработок.

• Альтернатива: использовать Google Lens или другие стабильные решения.

• Ошибка: применять Copilot Vision как инструмент для профессиональной аналитики.

• Последствие: неточности в распознавании.

• Альтернатива: специализированные сервисы компьютерного зрения (например, Adobe Firefly).

• Ошибка: хранить конфиденциальные изображения и делиться ими с ИИ.

• Последствие: риск утечки информации.

• Альтернатива: проверять настройки приватности и использовать офлайн-инструменты.

А что если функция приживётся

Если Copilot Vision станет постоянной частью Windows 11, пользователи получат встроенный "визуальный помощник", способный моментально распознавать изображения и тексты в любом приложении. Это может изменить привычки работы с компьютером: меньше копирования картинок в браузер, меньше сторонних сервисов.

В будущем Microsoft может расширить возможности: добавить распознавание видео, интеграцию с Office и функции для бизнеса.

Плюсы и минусы Copilot Vision

FAQ

Как включить Copilot Vision?
Нужно быть участником программы Windows Insider и установить последнюю тестовую сборку Windows 11.

Сколько стоит использовать Copilot Vision?
Функция бесплатна, как часть Windows 11.

Будет ли Copilot Vision доступен во всех версиях Windows?
Пока неизвестно. Microsoft может оставить её только в Pro и Enterprise или встроить в облачные сервисы.

Мифы и правда

• Миф: "Copilot Vision заменит Google Lens".
  Правда: пока он ограничен Windows и работает только в тестовом режиме.

• Миф: "Функция доступна всем пользователям Windows 11".
  Правда: пока только в Insider Preview.

• Миф: "Copilot Vision умеет анализировать видео".
  Правда: он работает только с изображениями в окнах приложений.

Исторический контекст

• 2017 год: запуск Google Lens на Android.

• 2021 год: Microsoft представила Copilot в Windows 11 как ИИ-помощника.

• 2023 год: кнопки Copilot появились в Paint, Notepad и на клавиатуре.

• 2024-2025 годы: первые тесты Copilot Vision в Insider Preview.

3 интересных факта

• Copilot Vision встроен даже в предварительный просмотр окна Edge.
• Microsoft уже тестировала кнопки Copilot на корпусах ПК.
• Перевод текста с экрана — ещё одна экспериментальная функция Copilot в Windows 11.