|
Microsoft продолжает активно развивать свой ИИ-помощник Copilot — на этот раз с функцией, которая способна анализировать происходящее на экране пользователя. Новое обновление под названием Copilot Vision делает искусственный интеллект действительно «зрячим»: теперь он может понимать, что отображается в окне, и подсказывать, как работать с разными приложениями.
Что такое Copilot Vision
Copilot Vision — это обновлённая функция ИИ-помощника Copilot в Windows, которая умеет:
- Анализировать изображения, открытые окна и веб-страницы
- Распознавать интерфейс приложений (например, Adobe Photoshop или Clipchamp)
- Подсвечивать нужные элементы на экране для помощи в навигации
- Давать рекомендации по действиям в контексте конкретной задачи
Таким образом, Copilot Vision становится чем-то вроде «всевидящего помощника», который понимает, что вы делаете, и подсказывает, как сделать это быстрее или проще.
Практические примеры использования
Согласно демонстрации от Microsoft:
- В Adobe Photoshop Copilot может подсказать, как обрезать изображение или применить фильтр.
- В видеоредакторе Clipchamp он помогает оптимизировать настройки проекта.
- В Minecraft — расскажет, как выживать в определённой игровой ситуации.
Такой подход особенно полезен для новичков, осваивающих сложные программы, или в ситуациях, когда нужно быстро разобраться в интерфейсе.
Как это работает
Copilot Vision не делает снимки экрана (в отличие от функции Recall, которая автоматически записывает историю действий). Вместо этого он функционирует как виртуальный помощник, получающий доступ к вашему экрану — по сути, как при демонстрации экрана в Microsoft Teams, но с возможностью анализа и контекстной помощи.
Для работы функции достаточно установить приложение Copilot на Windows. Не требуется специальный ПК с функцией Copilot Plus.
Ещё одно нововведение — интеллектуальный поиск файлов
Кроме анализа изображения, Microsoft также тестирует функцию поиска файлов по содержимому. Copilot теперь может находить документы по тексту, содержащемуся внутри, — даже если вы не помните точное название файла.
Это значительно упрощает работу с документами и помогает быстро находить нужную информацию без ручного поиска по папкам.
Что дальше?
Функции Copilot Vision и интеллектуального поиска пока доступны только участникам программы Windows Insiders, но в ближайшие недели или месяцы Microsoft начнёт масштабное развертывание среди всех пользователей Windows 11.
Также стоит отметить, что Microsoft активно интегрирует Copilot в другие продукты. В Microsoft 365 уже появились два «рассуждающих» ИИ-агента, которые помогают анализировать большие объёмы данных и давать экспертные рекомендации — особенно полезно для бизнеса.
Copilot Vision — это не просто обновление, а значительный шаг вперёд в развитии ИИ-интерфейсов. Благодаря способности видеть и понимать экран, ИИ-помощник становится по-настоящему полезным инструментом в повседневной работе и обучении. Остаётся дождаться финального релиза и опробовать возможности нового Copilot на практике.
| 
