Microsoft добавила в Copilot для Windows 11 функцию анализа скриншотов

Функционал Microsoft Copilot для Windows сейчас довольно ограничен, но в будущем ситуация может кардинально изменится. Microsoft представила новую функцию «Добавить скриншот», которая позволит захватить экран и попросить ИИ объяснить, что происходит на снимке. Функция развертывается поэтапно для всех пользователей.

Новая кнопка «Add a screenshot» (Добавить скриншот) в меню «Добавить изображение» на панели Copilot позволяет сделать снимок экрана и загрузить его в диалоговое окно ИИ-помощника. После загрузки изображения вы можете попросить Bing Chat обсудить его — задайте любой вопрос, связанный со скриншотом.

Все это напоминает существующую функцию загрузки изображений в чате copilot.microsoft.com или Bing.com, но интеграция более оптимизирована для скриншотов. При тестировании Copilot было предложено объяснить скриншот корзины с удаленными файлами, и ИИ-помощник быстро дал следующее описание:

Это иконка корзины для удаленных файлов на компьютере. Она показывает, что в корзине есть какие-то файлы, которые можно восстановить или окончательно удалить. Корзина - это функция операционной системы, которая помогает избежать случайного удаления важных данных.

Поскольку в Copilot работает Microsoft Edge, функция создания скриншотов также позволяет рисовать поверх скриншота и добавлять особые указания для ИИ-ассистента.

Если у вас есть доступ к ChatGPT-4 Turbo (распространяется избирательно), вы можете даже попросить Windows Copilot объяснить эмоции, включая те, что изображены на абстрактных картинках. Технология доступна только избранным пользователям, выбранным случайным образом, но Microsoft планирует расширить охват в ближайшие недели.

Copilot — ключевой компонент Windows 11

Microsoft подчеркивает, что Copilot является центральной функцией всех основных продуктов компании, включая Office и Windows.

В 2024 году Microsoft добавит специальную кнопку Copilot на клавиатуре для новых устройств Windows в рамках своих усилий по «упрощению работы с компьютером». На старом оборудовании доступ к Copilot можно будет получить с помощью сочетания клавиш Win+C.

Microsoft рекламирует это изменение как самое значительное обновление клавиатуры Windows за последние почти три десятилетия и сравнивает его с введением клавиши «Пуск» в Windows.

Microsoft подтвердила, что новые устройства Windows будут поставляться с клавишей Copilot и заявила:

Copilot станет точкой входа в мир искусственного интеллекта на ПК.

Стоит отметить, что в конце прошлого года также стали доступны мобильные приложения Microsoft Copilot для Android и Microsoft Copilot для iPhone и iPad.