В начале сентября этого года корпорация Яндекс порадовала пользователей своего браузера функцией закадрового синхронного перевода видео.
Технология еще сыровата, однако качество перевода очень даже неплохое.
Update: Яндекс добавил новые языки для перевода. На данный момент поддерживаются видео на английском, немецком, французском и испанском языках.
Как работает у Яндекс перевод видео онлайн
При включении перевода видео в Яндекс браузере происходит следующее:
- Определяется гендерная принадлежность говорящего (мужчина или женщина).
- Звуковая дорожка конвертируется в текст.
- Текст очищается от мусора и переводится нейронной сетью.
- Полученный перевод в соответствии с определенным гендером синтезируется русская звуковая дорожка.
- Итоговый перевод синхронизируется с видеорядом.
Именно из-за синхронизации русский перевод при необходимости ускоряется или замедляется. Часто фраза на русском языке звучит дольше английского варианта. Поэтому переводчик будет местами тараторить. Однако все прекрасно слышно.
Перевод довольно корректный. Текущую сырость алгоритмов можно услышать в третьем примере в фамилиях президентов и названии стран. Но это все исправимо. Яндекс обязательно доработает.
Разработчики говорят, что после нажатия кнопки запуска перевода может быть задержка несколько десятков секунд. Я попробовал с десяток роликов (три примера ниже). Почти на всех перевод появлялся сразу же после включения. И только на одном ролике перевод занял примерно 30 секунд.
Как переводить видео в Яндекс браузере
Запускаете ролик. При нахождении курсора мыши на видео в верхней части всплывает панелька с кнопками. Крайняя с права и есть кнопка включения перевода.
Она же его отключает. Все проще некуда. работает как в оконном так и в полноэкранном режиме.
Примеры перевода видео онлайн в Яндекс браузере
Английский
Французский
Немецкий
Испанский
Текущие ограничения
На данный момент пока не переводятся ролики больше двух часов. Так же для перевода пока доступен только английский язык.
С развитием технологии ограничения снимут. Наверняка пропадут и возможные задержки перед стартом.
Имхо Яндекс сделает в будущем два варианта перевода видео на русский язык — бесплатный с ограничениями (например по длительности переводимого видео, наличии задержки перед переводом) и платный варианты. Соответственно в платном будут отсутствовать какие-либо ограничения. А сам платный вариант будет в составе подписки Яндекс+.
Заключение
В целом данная технология мне очень понравилась. Теперь можно спокойно смотреть видео на английском языке не зная последнего.
Со временем Яндекс добавит больше исходных языков, отполирует технологию и она будет работать как часы.
Вангую, что Google сделает тоже самое в своем браузере.
А вы что думаете о данной технологии от Яндекса по синхронному закадровому переводу виде онлайн в своем браузере?