«Яндекс Браузер» теперь умеет переводить видео с китайского и автоматически накладывать русскую озвучку

Нейросеть научилась различать все четыре тона, которые определяют значение сказанного, и знает 6500 иероглифов. Более того, она умеет учитывать контекст и делить сплошной поток иероглифов на смысловые отрезки, чтобы перевод получался синхронным и качественным.
На данный момент нейросеть работает только с YouTube, но позже перевод планируется добавить и для китайской видеоплатформы Bilibili.
Один из разработчиков поделился, что примерно с лета пытался научить браузер переводить с китайского на русский. Рад, что команда смогла осилить китайский, буду ждать интеграцию и других азиатских языков. К слову, это уже шестой язык доступный в браузере. Про подробную работу над данной технологией вы сможете почитать здесь.
Asia Inside