Алиса AI научилась «распознавать» запахи по фотографиям

Компания Яндекс добавила в чат-бота Алиса AI необычную функцию: теперь нейросеть может «распознавать» ароматы по фотографиям. Пользователю достаточно загрузить изображение в чат и написать «Распознай аромат» – система проанализирует сцену и опишет, чем может пахнуть объект или окружение на снимке.

Функция работает не только с конкретными объектами, но и с атмосферой изображения. Например, по фото загородного дома Алиса AI может описать запах как «лето, садовые растения и домашняя выпечка», а по снимку офиса – «кондиционер, бумага из принтера и рабочая рутина». Такой подход делает взаимодействие с нейросетью более живым и приближённым к реальному восприятию.

Алиса AI может описывать запахи на основе анализа изображения и контекста сцены

Как это работает

В основе технологии лежит анализ визуальных характеристик изображения: цвета, текстуры, объектов и общего контекста сцены. По данным компании, используются методы «субпиксельного анализа» и «спектральной реконструкции», которые позволяют сопоставить визуальные данные с типичными ароматическими ассоциациями.

После этого нейросеть формирует текстовое описание запаха, учитывая не только сами объекты, но и предполагаемую атмосферу сцены — например, погодные условия или тип окружающей среды.

Где доступна функция

Новая возможность доступна в формате ограниченного бета-тестирования с 1 по 3 апреля. Она работает в чате с Алисой AI:

• в веб-версии на сайте alice.yandex.ru;
• в мобильных приложениях Алиса AI — ИИ-ассистент для iPhone, Алиса AI — ИИ-ассистент для Android, Яндекс с Алисой AI;
• в Яндекс Браузере;
• в сервисах поиска с Алисой.

Развлекательная функция с потенциалом

На текущем этапе функция носит скорее развлекательный характер, однако демонстрирует развитие мультимодальных возможностей нейросетей. Пользователи могут экспериментировать с разными изображениями – от чашки кофе и букета цветов до улицы после дождя или костра на природе – и получать необычные описания, дополняющие визуальное восприятие.

Ранее в Алиса AI уже появились функции оживления фото, редактирования изображений и объединения фотографий. Постепенно сервис превращается в полноценную платформу для работы с визуальным контентом с помощью текстовых запросов.