Google расширяет доступность автоматической озвучки на базе ИИ в YouTube

Функция автоматического дубляжа добавляет ИИ-озвучку на других языках к контенту, созданному партнерами YouTube, которые снимают познавательные и информационные видеоролики.

YouTube объявляет о расширении доступности функции автоматического дубляжа с использованием ИИ для «сотен тысяч информационных и познавательных каналов», участвующих в партнерской программе YouTube. Разработчики обещают скоро внедрить данную функцию и в «другие типы контента». Тестирование данного функционала изначально стартовало в июне 2023 года.

Состав дубляжа зависит от языка, используемого в исходном видео. Если изначально видео было на английском, то оно будет переведено на французский, немецкий, хинди, итальянский, испанский, индонезийский, японский и португальский языки. Если исходное видео было сделано на одном из этих языков, YouTube создаст только английский дубляж.

Для поддерживаемых каналов видео с ИИ-дублированием создаются автоматически при загрузке исходного видео, но создатели контента могут выбрать предварительный просмотр перед публикацией. YouTube также предоставляет возможности отменить публикацию или удалить дубляж.

Сейчас дубляж звучит не очень естественно, но YouTube обещает, что он станет лучше в имитации «тона, эмоций и даже атмосферы окружения» в последующих обновлениях.

Ниже приведен пример английского дубляжа французского видео о приготовлении картофеля в панировке:

Команда YouTube предупреждает:

Данная технология все еще довольно новая, и она не всегда будет идеальной. Мы старается сделать дубляж максимально точным, но могут быть случаи, когда перевод не совсем правильный или дублированный голос неточно передает оригинальную речь.

Стоит отметить, что ещё в сентябре 2021 года «Яндекс.Браузер» добавил автоматический закадровый перевод любых англоязычных видео в YouTube и других сервисах (за исключением лицензионного контента). В ноябре того же года появилась поддержка перевода видео на французском, испанском и немецком языках. В августе 2022 года «Яндекс» внедрил синхронный перевод прямых трансляций, а в апреле 2023 года — автоматический перевод видео с китайского языка.