Нейросеть Алиса в Яндекс Браузере научилась описывать изображения для незрячих пользователей

Яндекс Браузер получил новую функцию на базе нейросети Алиса, которая теперь способна понимать, что изображено на картинках в интернете, и создавать их текстовые описания. Это позволит незрячим и слабовидящим пользователям воспринимать визуальный контент — например, иллюстрации в статьях, фотографии товаров или изображения в социальных сетях.

Алиса не только сообщает, что нарисовано или сфотографировано, но и может по запросу пользователя добавить детали. Так, при описании товара в интернет-магазине она расскажет о цвете, фасоне и типе ткани, помогая сформировать полное представление о предмете.

Скачать Яндекс.Браузер

Как работает новая функция

Функция основана на мультимодальной нейросетевой модели, способной анализировать одновременно тексты и изображения. Она не ограничивается распознаванием отдельных объектов, а воспринимает изображение целиком, включая контекст, взаимосвязи и смысловую нагрузку. Такой подход позволяет формировать точные и естественные описания, понятные людям с нарушением зрения.

Чтобы получить описание изображения, пользователю нужно выбрать пункт «Описать картинку» в контекстном меню или на панели поверх изображения, либо просто навести фокус программы экранного доступа. В версиях Яндекс Браузера для Windows, iOS и Android Алиса может не только создать, но и озвучить описание.

Доступность и управление

Управлять функцией Показывать кнопку описания картинок можно в настройках браузера, в разделе «Настройки > Инструменты > Специальные возможности». При включённой программе экранного доступа Алиса будет описывать только те изображения, на которые пользователь навёл фокус. Это особенно важно для веб-разработчиков: соблюдение стандартов доступности сайтов делает интернет удобным для всех, включая людей с ограничениями по зрению.

Другие функции для пользователей с нарушением зрения

В Яндекс Браузере уже есть целый набор инструментов, повышающих удобство работы для людей с особыми потребностями:

• Режим чтения — убирает лишние элементы со страницы, помогая сосредоточиться на тексте.
• Тёмная тема и масштабирование интерфейса — уменьшают нагрузку на глаза и делают мелкий текст более читаемым.
• Умная камера — встроенный инструмент мобильного браузера, который помогает распознавать печатные тексты и предметы.

Подробнее о специальных возможностях браузера для всех пользователей можно узнать на официальной странице Яндекс Браузера.

О Яндекс Браузере

Яндекс Браузер — это современный и безопасный браузер с интегрированными генеративными нейросетями. Он умеет создавать тексты и изображения, пересказывать видео и статьи, распознавать QR-коды в роликах и выполнять закадровый перевод видео с восьми языков.

Браузер защищает пользователей от фишинговых сайтов, проверяет загружаемые файлы на вирусы и предотвращает кражу паролей и данных банковских карт.

По данным компании, Яндекс Браузер установлен более чем на 90 миллионах устройств в месяц.