greentea
Местный
- Сообщения
- 149
- Реакции
- 122
- Баллы
- 63
В браузере «Яндекса» появилась функция синхронного перевода видеороликов на YouTube и Vimeo. Причем алгоритм работает не только с предварительно загруженными материалами, но даже с прямыми эфирами
Дело в том, что перевод в реальном времени сильно отличается от обычного. Для того чтобы понять смысл фразы или словосочетания, переводчику необходимо услышать как можно большую часть сказанного. Естественно, в случае с синхронным переводом такой возможности у человека или машины практически не имеется.
Поэтому разработчики пошли на хитрость — они разделили обязанности между четырьмя нейросетями и заставили первую переводить звук в текст, вторую научили определять пол говорящего, а третью — заниматься пунктуацией и смыслом. Четвертая собирает полученную от этих ИИ информацию и создает окончательный перевод, который затем озвучивает и подклеивает к происходящему в ролике.
На данный момент функционал переводчика ограничен определенным списком каналов, а также пятью языками — английским, немецким, французским, итальянским и испанским. Позже специалисты планируют добавить еще несколько, включая китайский и японский.
Дело в том, что перевод в реальном времени сильно отличается от обычного. Для того чтобы понять смысл фразы или словосочетания, переводчику необходимо услышать как можно большую часть сказанного. Естественно, в случае с синхронным переводом такой возможности у человека или машины практически не имеется.
Поэтому разработчики пошли на хитрость — они разделили обязанности между четырьмя нейросетями и заставили первую переводить звук в текст, вторую научили определять пол говорящего, а третью — заниматься пунктуацией и смыслом. Четвертая собирает полученную от этих ИИ информацию и создает окончательный перевод, который затем озвучивает и подклеивает к происходящему в ролике.
На данный момент функционал переводчика ограничен определенным списком каналов, а также пятью языками — английским, немецким, французским, итальянским и испанским. Позже специалисты планируют добавить еще несколько, включая китайский и японский.