Браузер «Яндекс» добавил новую функцию для своих пользователей. Теперь любое видео на иностранном языке может быть переведено на русский язык в режиме реального времени. Сервис использует нейросеть, чтобы создавать озвучку поверх оригинала.
Система делает перевод всех роликов на YouTube с незначительным отставанием. Разработчики проверили работу на видео с мастер-классом китайского шеф-повара. На видео повар сети питания «Чихо» Ян Чжи делится рецептом одной из популярных позиций меню курицы с пропаренным рисом Kowloon. Оригинальная озвучка идет на мандаринском диалекте китайского языка.
Благодаря новой технологии можно открыть любую запись в «Яндекс Браузере» и нажать кнопку «Перевести видео». Создатели новой функции обучали нейросеть на базе более 1,5 миллиона видеозаписей на китайском языке. Сейчас механизм умеет не только распознавать китайскую речь, но и владеет различные тона языка, определяет смысл и значение сказанного, а также различает около 6,5 тысяч иероглифов. Более того, нейросеть делит сложносоставные предложения на более простые аналоги на русском языке.
На данный момент «Яндекс Браузер» способен переводить ролики с китайского, английского, французского, немецкого и испанского языков.
Фото на обложке: yandex.ru
