В Яндекс Браузере теперь доступен многоголосый перевод видео
Юзерам Yandex Браузера сейчас доступен многоголосный перевод видео — голосов сделалось 12 (6 мужских и 6 дамских). Благодаря усовершенствованным методам принимать видео с огромным количеством спикеров сделалось намного легче.
Как нейросеть распознает различных спикеров на видео
Поначалу нейросеть переводит речь в текст, восстанавливает пунктуацию и описывает границы предложений. Потом уже иная нейросеть анализирует спектрограмму голоса и отмечает на аудиодорожке фрагменты, произнесенные различными людьми. Так и становится понятно, кто из спикеров что произнес.
Дмитрий Тимко, управляющий приложения Yandex и Yandex Браузера:
Мы повсевременно работаем над качеством перевода и озвучки, чтоб отдать нашим юзерам доступ к хоть какому контенту со всего мира. По нашим оценкам, около половины YouTube-роликов на зарубежных языках – это ролики с 3-мя и наиболее спикерами. Глядеть их с двухголосой озвучкой не совершенно комфортно – потому мы и сделали 10 новейших голосов.
Напомним, онлайн-покупатели доверяют органической выдаче Yandex’а в 3 раза больше, чем рекламе.
