Нейросеть ElevenLabs научили дублировать видео на русский язык — с её помощью перевели сцены из игр и множество мемов

В соцсетях эту технологию называют удивительной и «потенциально революционной».

В октябре 2023 года в сервисе для синтезирования речи ElevenLabs появилась поддержка русского языка для создания автоматического дубляжа видео. После этого в соцсетях набрали большую популярность ролики, созданные при помощи нейросети. В частности, пользователи ElevenLabs обработали с применением сервиса популярные зарубежные и российские мемы, а также сцены из фильмов и игр. На это обратили внимание в издании «Афиша Daily».

Сервис даёт возможность переводить видео на 29 языков, включая русский. Судя по отзывам пользователей ElevenLabs, наилучший результат получается в роликах, в которых звучит не больше двух голосов. Кроме того, сервис не всегда хорошо распознаёт речь с акцентами. Тем не менее во многих случаях ElevenLabs позволяет добиться качественного результата.

Опробовать сервис для автоматического дубляжа видео можно на сайте ElevenLabs. Важно отметить, что этот инструмент условно-бесплатный — у него есть ограничения по использованию.