Microsoft дала Copilot зрение. Теперь он не только болтает, но и подсвечивает ваши ошибки
NewsMakerГотовы к тому, что ваш компьютер начнёт за вами следить?
Microsoft начала тестировать новое обновление для Windows-версии Copilot, которое заметно расширяет возможности помощника. Теперь Copilot Vision может получать доступ к изображению экрана или отдельных окон и использовать его для контекстной помощи. Если раньше подобный функционал был доступен только в браузере Edge, то теперь он работает с любыми приложениями на компьютере.
Одним из ключевых нововведений стало то, что Copilot Vision сможет подсказывать, как использовать функции сторонних программ, например, Adobe Photoshop. Пользователь увидит подсветку нужных элементов прямо на экране, а ИИ пошагово объяснит действия. На недавнем мероприятии в честь 50-летия Microsoft гости смогли опробовать раннюю версию Vision, где помощник, например, направлял игрока в Minecraft и помогал настраивать параметры в видеоредакторе Clipchamp.
Пока что новая функция доступна ограниченному числу участников Windows Insider в США. В начальной бета-версии подсветка элементов на экране ещё не активирована, но ожидается в последующих обновлениях. Несмотря на очевидные параллели с функцией Recall — которая делает автоматические снимки экрана — Copilot Vision больше напоминает обычный сеанс демонстрации экрана в Microsoft Teams, только с участием ИИ.
Кроме визуальной помощи, Microsoft тестирует ещё одну важную возможность — интеллектуальный поиск файлов с помощью Copilot. Пользователь может задать вопрос о содержимом документа, и помощник найдёт нужный файл среди форматов .docx, .xlsx, .pptx, .txt, .pdf и .json. Это особенно удобно для тех, кто часто работает с большими массивами документов и не всегда помнит точное название файла.
Для работы обеих функций не требуется новый Copilot Plus PC — достаточно обычного приложения Copilot на Windows. Обновления пока распространяются через программу предварительной оценки Windows, но в скором времени их планируют выпустить для широкой аудитории пользователей Windows 11. Кроме того, Copilot Vision будет доступен и на мобильных платформах — iOS и Android.
Таким образом, Microsoft продолжает активно внедрять ИИ в повседневную работу с ПК. Новый уровень взаимодействия с Copilot обещает сделать цифровую среду более интуитивной и удобной — особенно для тех, кто сталкивается с большими объёмами информации или сложным ПО.

Microsoft начала тестировать новое обновление для Windows-версии Copilot, которое заметно расширяет возможности помощника. Теперь Copilot Vision может получать доступ к изображению экрана или отдельных окон и использовать его для контекстной помощи. Если раньше подобный функционал был доступен только в браузере Edge, то теперь он работает с любыми приложениями на компьютере.
Одним из ключевых нововведений стало то, что Copilot Vision сможет подсказывать, как использовать функции сторонних программ, например, Adobe Photoshop. Пользователь увидит подсветку нужных элементов прямо на экране, а ИИ пошагово объяснит действия. На недавнем мероприятии в честь 50-летия Microsoft гости смогли опробовать раннюю версию Vision, где помощник, например, направлял игрока в Minecraft и помогал настраивать параметры в видеоредакторе Clipchamp.
Пока что новая функция доступна ограниченному числу участников Windows Insider в США. В начальной бета-версии подсветка элементов на экране ещё не активирована, но ожидается в последующих обновлениях. Несмотря на очевидные параллели с функцией Recall — которая делает автоматические снимки экрана — Copilot Vision больше напоминает обычный сеанс демонстрации экрана в Microsoft Teams, только с участием ИИ.
Кроме визуальной помощи, Microsoft тестирует ещё одну важную возможность — интеллектуальный поиск файлов с помощью Copilot. Пользователь может задать вопрос о содержимом документа, и помощник найдёт нужный файл среди форматов .docx, .xlsx, .pptx, .txt, .pdf и .json. Это особенно удобно для тех, кто часто работает с большими массивами документов и не всегда помнит точное название файла.
Для работы обеих функций не требуется новый Copilot Plus PC — достаточно обычного приложения Copilot на Windows. Обновления пока распространяются через программу предварительной оценки Windows, но в скором времени их планируют выпустить для широкой аудитории пользователей Windows 11. Кроме того, Copilot Vision будет доступен и на мобильных платформах — iOS и Android.
Таким образом, Microsoft продолжает активно внедрять ИИ в повседневную работу с ПК. Новый уровень взаимодействия с Copilot обещает сделать цифровую среду более интуитивной и удобной — особенно для тех, кто сталкивается с большими объёмами информации или сложным ПО.