Перевод доступен как с закадровым голосом, так и с автоматическими субтитрами.
Разработчики Яндекса запустили уникальную технологию для стримов — автоматический перевод видео. Теперь вы сможете смотреть прямые трансляции с переводом в реальном времени. Технология представляет из себя доработанный закадровый перевод видео, появившийся в Браузере еще зимой 2021. Функция перевода стримов находится в стадии беты и работает исключительно для перевода трансляций на YouTube каналах из плейлиста.
Если в случае с автоматическим переводом видео нейросети требовалось некоторое время для создания перевода, то новая функция делает перевод моментально, не отключаясь от прямой трансляции. Сложность процесса заключается в языковых особенностях, игре слов и прочему. Для обычного перевода нейросеть «забирает» как можно больше текста за один раз, чтобы максимально соответствовать контексту. Новая функция работает в виде синхронного переводчика, и начинает перевод еще до того, как предложение закончили произносить.
Функция доступна для версий Яндекс.Браузера, начиная с 22.7.2 для Windows и Mac. Подробнее о том, как устроена технология, читайте на Хабре.
Источник
