Компания «Яндекс» первой в мире запустила в своем браузере функцию автоматического закадрового перевода видеороликов. Пока на сервисе представлен прототип будущей полноценной разработки – сейчас пользователям доступно ограниченное количество видео на английском языке с параллельным переводом сказанного. Об этом пишет
Forbes. Предполагается, что в дальнейшем российские пользователи смогут смотреть ролики на иностранном языке с озвучкой на родном языке.
Руководитель направления обработки естественного языка в «Яндексе»
Дэвид Талбот отметил, что многие полезные материалы в интернете недоступны людям из-за трудностей с переводом. Он подчеркнул, что на сегодняшний день компания близка к тому, чтобы снять языковой барьер.
«Яндекс.Браузер» давно умеет переводить тексты, в этом году стал переводить изображения, перевод видео – следующий этап. Это большая сложная задача, которую никто в мире еще не решил. Мы тоже в начале пути, но у нас уже есть прототип и понимание, куда двигаться дальше», – сказал сотрудник «Яндекс».
Нал разработкой прототипа трудилось несколько команд инженеров – по технологии синтеза речи, «Яндекс.Переводчику», биометрии. Новая технология позволяет определить пол говорящего и подобрать необходимый закадровый голос. Он должен синхронизироваться с изображением, поэтому переводчик делает паузы, где-то замедляет, а где-то ускоряет речь. Темп речи контролирует специальный алгоритм, так как реплики в оригинале и переводе часто не совпадают по длине. В скором времени пользователи смогут сами выбирать, какие ролики переводить с помощью новой технологии.
Напомним, о новой разработке сотрудники «Яндекса» задумались еще осенью прошлого года. К созданию функции машинного перевода они приступили в начале 2021 года, а к марту был готов первый пробный вариант.
Новая технология не имеет аналогов в мире, по данным компании, она объединила в себе машинный перевод,
технологии биометрии, распознавания и синтеза речи. Окончательного варианта продукта, который бы позволил переводить любое видео в интернете, у «Яндекса» пока нет, но компания до конца 2021 года будет добавлять в нее новые возможности – перевод видео по запросу, дополнительные функции и т. д.