«Яндекс» представил прототип технологии машинного перевода видео и закадровой озвучки в реальном времени

Он станет доступен для всех пользователей «Яндекс.Браузера».

«Яндекс» представил прототип технологии машинного перевода видео и закадровой озвучки в реальном времени
  • Цель разработчиков из «Яндекса» — позволить людям смотреть любые видеоролики озвученными на удобном им языке, независимо от исходного языка, на котором снято видео.
  • Прототип будет работать только с роликами на английском. На данный момент опробовать его можно лишь в специальном плейлисте на YouTube через десктопный «Яндекс.Браузер».
Обращение Дэвида Талбота, руководителя направления обработки естественного языка в «Яндексе»
  • Вокруг ролика должна появиться специальная рамка с предложением перевести его — функцию можно включать и отключать по желанию.
  • Технология уже способна подстраиваться под темп речи, делать смысловые паузы, а также определять пол говорящего и подбирать подходящий голос.
  • Пока что машинный перевод не справляется со многими интонациями, поэтому некоторые фразы звучат «плоско», однако в «Яндексе» планируют со временем дорабатывать систему.
Пример работы машинного перевода видео
  • В «Яндексе» утверждают, что их система, совмещающая распознавание и синтез речи, биометрию и машинный перевод, не имеет аналогов в мире.
  • Позже разработчики планируют открыть возможность переводить любые ролики с английского, а в перспективе — добавлять поддержку других языков.

В интернете очень много полезного контента, который недоступен людям из-за языкового барьера. И мы близки к тому, чтобы окончательно стереть все границы.

«Яндекс.Браузер» давно умеет переводить тексты, в этом году стал переводить изображения, перевод видео — следующий этап. Это большая сложная задача, которую никто в мире еще не решил. Мы тоже в начале пути, но у нас уже есть прототип и понимание, куда двигаться дальше.

Дэвид Талбот, руководитель направления обработки естественного языка в «Яндексе»
324324
213 комментария

Шаг интересный.
А в других браузерах будет работать? (скорее всего нет, но все же)
Не очень хочется ставить "Яндекс.Браузер" ради одной фичи.

87

Комментарий недоступен

34

Давно уже работает. Но в виде субтитров. И не яндекс (эта фирма у меня только с вирусами ассоциируется).

14

Комментарий недоступен

9

Эх, так и есть. Яндекс браузер ассоциируется с помойкой из-за того что он везде навязывается и наровит установиться с любым приложением, если галку проворониш и не отключиш. А их поисковик ещё и мошенников пропускает за деньги в топ, проверки у них никакой нет.

6

Это тот же удобный Хромиум, на котором пока только файрфокс не работает
Непонятно какие ещё остались браузеры и какие у них фичи

2

У меня давным-давно стоит, не надо специально даже ставить блокиратор рекламы - уже встроен )

1