YouTube открыл автоматический ИИ-дубляж для всех: 27 языков и поддержка русского

YouTube открыл доступ к функции автоматического дубляжа видео для всех пользователей платформы. Если раньше инструмент тестировался с ограниченным числом авторов и поддерживал лишь девять языков, то теперь нейродубляж доступен глобально и работает уже с 27 языками — в их числе русский.

Технология автоматического дубляжа начала тестироваться летом 2023 года и основана на ИИ-сервисе Aloud, разработанном в инкубаторе Area 120 компании Google. За это время инструмент заметно эволюционировал и вышел за рамки экспериментального режима.

Как работает автоматический дубляж в YouTube

Дубляж создаётся автоматически при загрузке видео на платформу. После генерации автор может прослушать переведённую аудиодорожку в творческой студии YouTube и при необходимости удалить её — как до публикации ролика, так и после. Это позволяет контролировать качество перевода и принимать решение о его использовании.

Поддерживается перевод как с английского на русский, так и с русского на английский, а также между другими доступными языками. По заявлению YouTube, цель функции — упростить доступ к контенту со всего мира без необходимости ручного перевода или сторонних инструментов.

Expressive Speech и будущие улучшения

Одновременно с расширением языковой поддержки YouTube обновила и саму технологию ИИ-дубляжа. Новая версия способна передавать интонацию, темп речи и эмоциональную окраску оригинального голоса. Однако на текущий момент функция Expressive Speech работает не для всех языков — она доступна для английского, французского, немецкого, индонезийского, итальянского, португальского, испанского языков и хинди.

Кроме того, YouTube тестирует улучшенную синхронизацию движений губ с переведённой речью. Эта возможность пока находится в стадии эксперимента и официально не запущена.

Автоматический перевод видео на других платформах

Яндекс ещё в 2021 году добавил в Яндекс Браузер автоматический закадровый перевод англоязычных видео на YouTube и в других сервисах. В последующие годы функциональность расширялась: появились переводы с немецкого, французского, итальянского и испанского языков, синхронный перевод прямых трансляций, а затем — поддержка китайского, японского и корейского языков.

В отличие от браузерных решений, подход YouTube интегрирован непосредственно в платформу и ориентирован прежде всего на авторов контента, позволяя им сразу публиковать видео с многоязычной озвучкой.

Автоматический ИИ-дубляж можно включить, настроить или отключить в любой момент через настройки видео. Функция распространяется постепенно, но формально уже считается доступной для всех авторов YouTube.