Яндекс внедрил ИИ в умную IP-камеру: распознавание событий, сценарии и сводки дня

Яндекс внедрил искусственный интеллект в умную IP-камеру: теперь устройство анализирует видеопоток и отправляет уведомления не только о факте движения, а с конкретным описанием события в кадре (например, «в кадре появился кот»). Вместе с этим камера стала основой для более гибких сценариев умного дома: пользователь может в свободной форме описать условие вроде «собака грызёт диван» и выбрать, какое действие должно выполняться в ответ.

Ещё одно нововведение — ежедневная «суммаризация дня»: раз в сутки нейросеть формирует краткую сводку всего, что происходило в кадре, и отправляет её пользователю в приложении «Дом с Алисой для Android» / «Дом с Алисой для iPhone». Такой подход помогает быстрее понимать, что происходило дома, и находить нужные моменты в записях без просмотра длинного архива.

Детализированные уведомления

Главное изменение — переход от универсального события «зафиксировано движение» к более точным уведомлениям. Если камера установлена, например, в коридоре, то вместо абстрактного «человек в кадре» она может сообщить, что дети пришли домой. Это позволяет оценить ситуацию быстрее и, в некоторых случаях, вообще не открывать видеопоток в приложении.

ИИ-описания также появились в архиве записей: каждое событие теперь сопровождается текстовой подписью о том, что камера фиксировала в этот момент. Это упрощает поиск нужных фрагментов — можно ориентироваться не только по таймлайну, но и по смыслу происходящего.

Индивидуальные сценарии умного дома

Ранее сценарии умного дома, основанные на данных камеры, были привязаны к ограниченному набору сигналов: шум, движение и человек в кадре. Теперь камера интерпретирует происходящее с помощью ИИ и реагирует на конкретные события, которые пользователь формулирует своими словами.

В приложении «Дом с Алисой» можно задать условие в свободной форме — например, «кот запрыгнул на стол», «собака появилась в комнате», «ребёнок сел на кровать» — и связать его с действием. Практические примеры таких автоматизаций:

• включать ночник в детской, если ребёнок проснулся ночью;
• активировать умную поилку, когда в кадре появляется собака;
• отправлять себе фото каждый раз, когда питомец прыгает на диван;
• запускать домашние сценарии не по «движению», а по описанному пользователем событию.

За счёт этого камера становится не просто датчиком движения, а «смысловым» триггером для умного дома, который лучше соответствует реальным бытовым ситуациям.

Суммаризация дня

Суммаризация дня включена по умолчанию: в выбранное пользователем время нейросеть генерирует краткий отчёт о событиях, которые зафиксировала камера. Когда сводка готова, приложение «Дом с Алисой» отправляет уведомление, а сама суммаризация доступна в карточке устройства.

В отчёте отображается короткое описание того, что происходило в течение дня: кто и что появлялось в кадре, как менялось поведение людей и питомцев или положение объектов. Такой формат удобен, когда камера используется для контроля дома, детей или животных, а времени на просмотр архива не хватает.

ИИ в умной камере — Alice AI VLM

Для интерпретации происходящего в кадре камера использует Alice AI VLM — визуально-языковую модель Яндекса, которая анализирует изображение и формирует текстовое описание. По заявлению компании, модель относится к семейству Alice AI вместе с языковой и генеративной моделями и обучена на большом объёме визуальных и текстовых данных, что позволяет ей понимать контекст событий в кадре.

Отмечается, что похожая технология уже используется в live-режиме в чате с Алисой в рамках опции «Алиса Плюс», а теперь она появилась и в умной IP-камере.

Подписки, цены и что стало доступно бесплатно

Новые возможности доступны в рамках подписок на дополнительные функции умной IP-камеры «Стандарт» и «Экстра». Эти тарифы включают преимущества вроде облачного хранения, записи в архив при обнаружении движения и другие функции.

• «Экстра» — включает все новые технологии. Стоимость: 699 рублей.
• «Стандарт» — позволяет пользоваться ИИ-описанием уведомлений, ИИ-описаниями в архиве и суммаризацией дня. Стоимость: 299 рублей.
• Для пользователей, которые ранее не подключали платные опции, первый месяц подписки доступен бесплатно.

Также Яндекс отмечает, что часть возможностей, которые раньше были в платной подписке, теперь доступна без доплаты. В их числе:

• следование за человеком в кадре;
• фотоснимок в уведомлении о движении или человеке в кадре;
• отправка фото по сценарию (например, каждый день в 18:00).

Добавление Alice AI VLM превращает умную IP-камеру из «датчика движения с видео» в более интеллектуальное устройство, которое может объяснить, что именно происходит дома, упростить поиск событий в архиве и дать пользователю гибкий способ запускать сценарии умного дома по смысловым условиям. При этом ключевые ИИ-функции распространяются через подписки «Стандарт» и «Экстра», а часть ранее платных возможностей стала доступна всем пользователям.