Недавно Яндекс Браузер добавил функцию перевода видео с китайского языка на русский. Это достижение стало возможным благодаря обучению нейросетей, которые автоматически накладывают русскую озвучку на видео. Пользователи теперь могут наслаждаться многочисленным уникальным контентом, доступным в китайском сегменте интернета.
Чтобы обучить нейросети, был создан уникальный датасет, включающий 100 тысяч видео с качественными субтитрами на севернокитайском диалекте. Это позволило системе научиться понимать и переводить речь на китайском языке.
Китайский язык отличается от европейских языков, и для его освоения потребовалось разработать новые подходы и алгоритмы. Разработчики закодировали словарь для работы с китайским языком в виде 10 000 токенов, что в два раза больше, чем для пяти европейских языков.
Одной из ключевых особенностей китайского языка являются тоны. Они определяют смысл произносимого слога и могут изменяться в зависимости от мелодического рисунка голоса. Нейросети Яндекс Браузера смогли освоить эту сложную особенность всего за месяц, что позволило точнее переводить видео.
Если вы хотите опробовать новую функцию, Яндекс Браузер сделал специальную подборку интересных видео на китайском. Для перевода видео на YouTube, просто нажмите на кнопку «Перевести видео» после его открытия. Вскоре появится поддержка популярной китайской видеоплатформы Bilibili.
Теперь, когда у Яндекс Браузера есть технологическая база для работы с азиатскими языками, интересно узнать, какой из них пользователи хотели бы видеть в переводе видео.
