Перевод видео в «Яндекс.Браузере» в реальном времени: как это работает
Вам не нужно ждать озвучки новой серии любимого сериала, ведь теперь ее может озвучить браузер
Российская компания «Яндекс» в июне 2021 года серьезно обновила свой «Яндекс.Браузер», который получил уникальную функцию перевода видео в режиме реального времени и озвучки его нейросетями. Пока перевод доступен только с английского языка, но в дальнейшем их количество должно увеличиться.
Как работает перевод в реальном времени в «Яндекс.Браузере»?
Для реализации функции «Яндекс» использовал технологию «Переводчика», речевые технологии и биометрию. Биометрия помогает специально созданной для новой функции нейросети определить пол говорящего, что позволяет подобрать более точный перевод и голос для озвучки.
С каждым днём в интернете становится всё больше интересного и полезного видео: от развлекательных шоу до образовательных курсов. При этом большая часть материалов выходит на иностранных языках и недоступна пользователям из России из-за языкового барьера. Мы близки к тому, чтобы снять этот барьер, и представляем вам первую версию машинного перевода видео, – заявляют в «Яндексе».
Важно отметить, что нейросети научились создавать полноценный закадровый дубляж видео. Искусственный интеллект умеет ускоряться и замедляться в произношении фраз, а также делать паузы, чтобы перевод был максимально синхронным. Сегодня уже даже существуют нейросети, способные изменить движения губ человека на видео — такую технологию планируют использовать при озвучке фильмов.
Как включить функцию перевода в реальном времени в «Яндекс.Браузере»?
Перевод сегодня доступен в «Яндекс.Браузере» для Windows и macOS. Чтобы его включить, надо запустить любое видео, навести на него курсор и найти в верхней части панели значок «Яндекс.Переводчика» в одном ряду со значком, позволяющим открыть видео в отдельном окне.
После нажатия автоматический голосовой перевод включится сам и вы сможете наслаждаться (мы надеемся) сгенерированной нейросетью многоголосой озвучкой.
