- Закадровый перевод англоязычных видео в Яндекс.Браузере
- Яндекс обвинили в краже идеи для сервиса перевода видео
- Перевод страниц, картинок и видео
- Перевод страниц, слов и фраз
- Проверка правописания на иностранном языке
- Перевод картинок
- Перевод и озвучка видео
- Настройки перевода
- Отключение переводчика
- Проблемы с переводом
- Перевод страниц, картинок и видео
- Перевод страниц, слов и фраз
- Проверка правописания на иностранном языке
- Перевод картинок
- Перевод и озвучка видео
- Настройки перевода
Закадровый перевод англоязычных видео в Яндекс.Браузере
О технологии автоматического закадрового перевода англоязычных видео в Интернете от Яндекса, появившейся в Яндекс.Браузере. Что являет собой эта технология, как её включить на YouTube.
Не успели ещё мы, пользователи Интернета привыкнуть к тому, что автоматический перевод веб-страниц в браузерах – сегодня это уже вещь вполне достойного уровня, с помощью которой мы можем как минимум понять суть изложенного в текстах на иностранном языке, как технологии автоматизации перевода шагнули ещё дальше. И замахнулись они на закадровый перевод видеороликов, выложенных в Интернете. Относительно недавно Яндекс представил интегрированную в свой браузер Яндекс.Браузер технологию автоматического голосового перевода англоязычных видео на YouTube, Vimeo и некоторых других интернет-площадках. Что за функция, и как она работает?
Цель создания Яндексом закадрового автоматического перевода видео в Интернете – сделать англоязычные видео доступными русскоязычным пользователям. Далеко не все русскоязычные владеют английским языком на должном уровне, чтобы понимать происходящее в обучающих, технических, научных и т.п. видео. Единственным решением, как русскоязычным смотреть YouTube-видео на английском, до недавнего времени были только субтитры. Но всерьёз рассматривать инструмент субтитров на YouTube можно, если только они созданы не автоматически, а на каналах, где авторы занимаются субтитрами и редактируют их. А таких немного. Предложенная Яндексом технология, во-первых, решает проблему низкого качества самого перевода субтитров за счёт реализации своих механизмов распознавания речи и перевода. Во-вторых, предлагает закадровый перевод, т.е. перевод с переозвучиванием видео. Переозвучивание базируется на механизме синтезирования речи Яндекса. Выполнено по принципу профессионального закадрового перевода: оригинальный звук заглушается и поверх него пускаются русскоязычные голосовые движки, озвучивающие переведённую речь. Технология закадрового перевода распознаёт оригинальные женские и мужские голоса и переозвучивает их, соответственно, женским и мужским голосовыми движками. Где, кстати, в женском голосовом движке каждый узнает голос Алисы – голосового ассистента Яндекс.Браузера. Также технология учитывает темп речи говорящих в оригинале.
Технология закадрового перевода интегрирована в Яндекс.Браузер, пока что её без проблем можно обнаружить только в десктопной версии браузера, но также она может быть доступна уже и на некоторых мобильных устройствах. В любом случае необходима последняя актуальная версия Яндекс.Браузера. В десктопной версии при открытии видео, где поддерживается закадровый перевод, увидим его кнопку «Перевести видео» в числе функций на самом видео. Кликаем эту кнопку.
Если ролик непродолжительный, закадровый перевод начнётся практически мгновенно. Если ролик длинный, придётся немного подождать, при больших объёмах обработки данных технологии нужно какое-то время на перевод и озвучку. В общем принцип работы перевода видео таков: при включении этой функции в видеоролике в фоне запускается распознавание речи, далее текст переводится, затем озвучивается голосовыми движками с применением мужского и женского голоса, а также различных темпов их воспроизведения. При этом закадровый перевод осуществляется максимально синхронно, насколько это возможно сделать автоматически. Для этого в процессе перевода учитываются временные отрезки оригинального звучания и в соответствии с ними запускается переозвучивание голосовыми движками.
Пока что технология работает только для видеороликов на английском языке. И только для видео, которые выложены в общем доступе. Использовать её предпочтительнее для видео разговорного жанра, но иногда она кое-как справляется с переводом текста в музыкальных клипах и видео концертов. Где-то с неточностями перевода, где-то с пропуском больших отрезков речи, но справляется. Но в каких-то видеороликах закадровый перевод работать не будет. Это могут быть музыкальные видео, видео с плохим звучанием и прочие случаи, где механизм распознавания речи столкнётся с какими-то трудностями.
В целом же Яндексу большой зачёт, весьма неплохо как для первых наработок. Остаётся надеться, что и идея, и её технология не будут заброшены, а будут эволюционировать. В процессе эволюции избавятся от шероховатостей и угловатостей и превратятся в годный качественный продукт отечественного производства.
Источник
Яндекс обвинили в краже идеи для сервиса перевода видео
Непубличное акционерное общество «Оллмай.блог» подало иск против Яндекса в Aрбитражный суд Москвы. IT-гиганта потребовали опровергнуть слова о том, что он разработал технологию машинного перевода видео, не имеющую аналогов в мире.
«Оллмай.блог» представляет одно из юрлиц сервиса AllMyBlog. Он занимается автоматизацией процесса размещения, локализации и монетизации видео на международных видеоплатформах.
Истец утверждает, что технология Яндекса не является новой, а подобные разработки велись в AllMyBlog, и та предлагала Яндексу сотрудничество, а также высылала первые результаты работы системы и ее презентацию.
Ранее в AllMyBlog создали продукт Taradam, который позволяет переводить видеоконтент на 56 языков мира. Компания уже является партнером Яндекса, в частности, размещает блогерский контент на платформе «Яндекс.Эфир». 24 мая AllMyBlog отправила интернет-компании презентацию с описанием технологии и предложением о сотрудничестве. Переговоры длились до 7 июля. На следующий день Яндекс заявил о собственной разработке роботизированного перевода видео в браузере.
Taradam представляет собой Telegram-бот, для работы с которым нужно отправить ссылку на YouTube-видео или файл с видеоконтентом. Бот просит выбрать исходный язык и один или несколько языков перевода. После оплаты услуги он выдает пользователю ссылку или файл на переведенный контент.
Основатель AllMyBlog Кирилл Калашников отмечает, что его компания не требует денег с ответчика, но для него «принципиальный момент, чтобы никто не выдавал его идею за свою».
По его словам, AllMyBlog работал с Яндексом с 2019 года в области дистрибуции видеоконтента. Тогда у сторон появилось понимание того, что российский контент интересен в Китае и может набирать в стране миллионы присмотров при условии, что будет переведен на китайский язык. Тогда Яндекс запросил математические модели и презентации AllMyBlog, а также прошло несколько встреч с акционерами компании. Сервис рассчитывал привлечь инвестиции Яндекса. Было заключено соглашение о неразглашении о передаче технологии AllMyBlog, но в июле Яндекс отказалась от сотрудничества. При этом AllMyBlog выложил свой продукт в открытый доступ раньше Яндекса — 1 июля.
Калашников допускает, что IT-гигант «мог украсть технологию случайно»: «Компания стала очень большой, мы передавали информацию о технологии одному департаменту, но она могла попасть и в департамент, который в итоге запускал сервис перевода».
В пресс-службе Яндекса ответили, что категорически не согласны с утверждениями и требованиями AllMyBlog. Компания заявляет, что она не использовали и не используют какие-либо разработки AllMyBlog и не вели никаких переговоров об инвестициях с этим сервисом. В Яндексе отмечают, что обсуждения проекта для перевода видео начались в компании осенью 2020 года, и в нем использовали только собственные технологии компании — машинный перевод, биометрию, распознавание и синтез речи. Там напомнили, что подход Яндекса существенно отличается от проекта Taradam.
Юристы говорят, что в России идеи не защищаются законом, таким образом, если Яндекс не копировал конкретный программный код, то AllMyBlog не удастся ничего доказать.
Яндекс объявил о работе над сервисом машинного перевода видео с одного языка на другой 16 июля. Компания заявила, что он позволит пользователям смотреть ролики в браузере с закадровым переводом в Яндекс.Браузере для Windows и macOS.
Источник
Перевод страниц, картинок и видео
Встроенный переводчик показывает слова и фразы на том языке, который используется в интерфейсе браузера. Также он распознаёт надписи на картинках и даёт перевод поверх оригинального текста. Кроме того, в браузере доступен перевод видео с английского языка на русский. Смотрите обучающие лекции и любимые видеоролики сразу на русском языке с помощью функции закадровой озвучки.
Перевод страниц, слов и фраз
Яндекс.Браузер автоматически определяет язык загруженной страницы и, если он отличается от языка интерфейса, предлагает перевести ее. Окно перевода можно также вызвать, нажав значок в Умной строке.
Чтобы перевести текст страницы на язык интерфейса браузера, нажмите в окне Перевести . Чтобы вернуть страницу на языке оригинала, нажмите в окне Показать оригинал .
Если вам нужно перевести страницу на другой иностранный язык, укажите его вручную, нажав в окне → Перевод на другой язык .
Если вы перевели страницу на один язык, а затем изменили язык перевода, то картинки автоматически переведутся на новый язык.
Чтобы увидеть текст переведенной страницы на языке оригинала, наведите курсор мыши на предложение. Оригинальный текст появится во всплывающем окне.
Если всплывающее окно с текстом не появилось:
Яндекс.Браузер может переводить на русский язык отдельные слова или предложения на странице. Чтобы увидеть перевод слова или словосочетания, выделите их и нажмите значок в контекстном меню.
Проверка правописания на иностранном языке
Браузер проверяет правописание в формах ввода (например, при работе с почтой).
Когда вы вводите текст, браузер подчеркивает незнакомые слова. Если вы уверены в написании подчеркнутого слова, нажмите на него правой кнопкой мыши и выберите Добавить в словарь .
Вы можете редактировать пользовательский словарь:
Перевод картинок
Нажмите на изображение правой кнопкой мыши и выберите в контекстном меню Перевести картинку .
Чтобы перевести остальные картинки:
Чтобы посмотреть оригинал картинки, используйте один из способов:
Чтобы скрыть кнопку переводчика на всех картинках, наведите на любое изображение и нажмите → Скрыть кнопку .
Чтобы посмотреть страницу и картинки на языке оригинала, нажмите в окне Показать оригинал .
Перевод и озвучка видео
Чтобы посмотреть видео на русском языке, наведите указатель мыши на ролик, а затем нажмите появившийся значок . Видео продолжит озвучиваться на русском языке. Мужчин озвучивает мужской голос, а женщин — женский.
Иногда перевод видео занимает некоторое время. Вам придет всплывающее уведомление, когда всё будет готово.
Если вы хотите вернуться к оригиналу, ещё раз нажмите значок .
Настройки перевода
Чтобы браузер переводил страницы на конкретном языке, не запрашивая разрешения:
Отключение переводчика
- Страницы
- Слова и фразы
- Картинки
- Видео
Если вы не хотите, чтобы браузер предлагал перевод иноязычных страниц:
Проблемы с переводом
Переводчик в браузере включён по умолчанию. Убедитесь, что ранее вы не отключили переводчик вручную:
Также страница может не переводиться, если когда-то при ее просмотре вы отказались от перевода. В этом случае:
Если на картинке появляется значок , то перевести ее не удалось. Переводчик не распознаёт недостаточно четкое изображение, курсивный или рукописный текст.
Если картинка маленькая (например, кнопка с текстом), перевод может быть скрыт. Наведите указатель мыши на картинку, чтобы его увидеть.
Технология находится в разработке, поэтому перевод доступен не для всех видео.
Перевод страниц, картинок и видео
Встроенный переводчик показывает слова и фразы на том языке, который используется в интерфейсе браузера. Также он распознаёт надписи на картинках и даёт перевод поверх оригинального текста. Кроме того, в браузере доступен перевод видео с английского языка на русский. Смотрите обучающие лекции и любимые видеоролики сразу на русском языке с помощью функции закадровой озвучки.
Перевод страниц, слов и фраз
Яндекс.Браузер автоматически определяет язык загруженной страницы и, если он отличается от языка интерфейса, предлагает перевести ее. Окно перевода можно также вызвать, нажав значок
Чтобы перевести текст страницы на язык интерфейса браузера, нажмите в окне Перевести . Чтобы вернуть страницу на языке оригинала, нажмите в окне Показать оригинал .
Если вам нужно перевести страницу на другой иностранный язык, укажите его вручную, нажав в окне
Если вы перевели страницу на один язык, а затем изменили язык перевода, то картинки автоматически переведутся на новый язык.
Чтобы увидеть текст переведенной страницы на языке оригинала, наведите курсор мыши на предложение. Оригинальный текст появится во всплывающем окне.
Если всплывающее окно с текстом не появилось:
Яндекс.Браузер может переводить на русский язык отдельные слова или предложения на странице. Чтобы увидеть перевод слова или словосочетания, выделите их и нажмите значок
Проверка правописания на иностранном языке
Браузер проверяет правописание в формах ввода (например, при работе с почтой).
Когда вы вводите текст, браузер подчеркивает незнакомые слова. Если вы уверены в написании подчеркнутого слова, нажмите на него правой кнопкой мыши и выберите Добавить в словарь .
Вы можете редактировать пользовательский словарь:
Перевод картинок
Нажмите на изображение правой кнопкой мыши и выберите в контекстном меню Перевести картинку .
Чтобы перевести остальные картинки:
Чтобы посмотреть оригинал картинки, используйте один из способов:
Чтобы скрыть кнопку переводчика на всех картинках, наведите на любое изображение и нажмите
Чтобы посмотреть страницу и картинки на языке оригинала, нажмите в окне Показать оригинал .
Перевод и озвучка видео
Чтобы посмотреть видео на русском языке, наведите указатель мыши на ролик, а затем нажмите появившийся значок
Иногда перевод видео занимает некоторое время. Вам придет всплывающее уведомление, когда всё будет готово.
Если вы хотите вернуться к оригиналу, ещё раз нажмите значок
Настройки перевода
Чтобы браузер переводил страницы на конкретном языке, не запрашивая разрешения:
Источник