Как переводить видео и стримы в Douyin в реальном времени: двуязычные субтитры и синхронный перевод

Equalang

Вкратце

Узнайте, как включить параллельные двуязычные субтитры и синхронный перевод речи в реальном времени при просмотре коротких видео и прямых трансляций на иностранных языках в веб-версии Douyin.

Ключевые слова: двуязычные субтитры Douyin; перевод Douyin в реальном времени; перевод стримов Douyin; Equalang; перевод аудио в реальном времени

Будь то исследование товаров для трансграничной электронной коммерции, сравнительный анализ аккаунтов зарубежных конкурентов или обычный просмотр контента на иностранном языке — всё больше команд используют веб-версию Douyin в десктопных браузерах.

Однако подавляющее большинство оригинальных коротких видео на иностранных языках на платформе не имеют китайских субтитров. Прямые эфиры в формате e-commerce и совместные стримы с несколькими гостями от зарубежных авторов также обычно представляют собой живую разговорную речь без сценария и субтитров. При высоком темпе иностранной речи воспринимать ключевую информацию исключительно на слух бывает непросто.

В этой статье рассматриваются популярные на сегодняшний день решения и пошагово объясняется, как с помощью Equalang в веб-версии Douyin включить параллельные двуязычные субтитры для оригинальных видео и синхронный перевод прямых трансляций в реальном времени.

Объективное сравнение популярных решений

При работе с видеоконтентом на иностранных языках в сети в настоящее время доступно три основных подхода:

1. Встроенные автосубтитры платформы

  • Принцип работы: базируется на том, что авторы включают встроенное распознавание речи платформы при публикации видео либо загружают внешние файлы субтитров.
  • Лучше всего подходит для: видео, специально локализованных авторами для китайской аудитории.
  • Ограничения: в большинстве оригинальных коротких видео на иностранных языках в Douyin дорожка субтитров отключена. Даже при наличии субтитров они обычно однострочные и на одном языке, из-за чего сложно сопоставлять оригинальную речь с переводом. Кроме того, встроенные двуязычные субтитры практически никогда не доступны во время прямых трансляций.

2. Традиционные расширения для перевода веб-страниц

  • Принцип работы: заменяют содержимое узлов DOM путем анализа статического текста на веб-странице.
  • Лучше всего подходит для: перевода статического текста, такого как названия видео, описания публикаций, хэштеги, биографии профилей и комментарии.
  • Ограничения: не имеют доступа к медийному аудиопотоку внутри видеоплеера, что делает невозможным перевод звука или динамическое отображение субтитров.

3. Расширения для перевода аудио в реальном времени (например, Equalang)

  • Принцип работы: расширение для браузера захватывает воспроизводимый звук, выполняет распознавание речи и перевод, а затем формирует двуязычные субтитры непосредственно поверх видеоплеера.
  • Лучше всего подходит для: оригинальных коротких видео без субтитров, совместных стримов зарубежных авторов и прямых трансляций трансграничных покупок в реальном времени.
  • Ограничения: требуется относительно четкий голос; слишком громкая фоновая музыка (BGM) или сильный посторонний шум могут снизить точность распознавания.

Практическое руководство: двуязычные субтитры для видео в ленте

На примере браузерного расширения Equalang рассмотрим, как включить двуязычные субтитры для оригинального аудио на иностранном языке в веб-версии Douyin.

При просмотре коротких видео на иностранных языках в веб-версии Douyin в десктопном браузере расширение автоматически предлагает перевод аудио в реальном времени, если обнаруживает отсутствие субтитров.

Мы протестировали этот сценарий, открыв в веб-клиенте Douyin англоязычное видео с речью без субтитров. При загрузке страницы расширение определило, что у видео нет субтитров, и вывело уведомление: «No subtitles detected; real-time audio translation automatically enabled» («Субтитры не обнаружены; перевод аудио в реальном времени включен автоматически»). Затем мы нажали «Unmute» в плеере Douyin. Выбрав «English» в качестве Source Language (исходного языка) и «Standard» в качестве Translation Mode (режима перевода), мы сразу же получили двуязычные субтитры поверх видеоплеера: оригинальный текст на английском сверху и перевод на китайский снизу:

Спикер стоит на сцене с красным ковровым покрытием, внизу отображаются две строки субтитров Equalang: оригинальный английский текст «Concrete and take you somewhere perhaps unexpected, but also totally relatable. Imagine walking into.» и китайский перевод «具体来说,带你去一个也许出乎意料、但又特别有共鸣的地方。想象一下,你走进了……»
Интерфейс воспроизведения видео в Douyin с двуязычными субтитрами: оригинальный текст «Concrete and take you somewhere perhaps unexpected, but also totally relatable. Imagine walking into.» и перевод на китайский язык снизу «具体来说,带你去一个也许出乎意料、但又特别有共鸣的地方。想象一下,你走进了……»

Основные настройки и параметры отображения

Открыв панель управления расширения, вы можете настроить параметры в соответствии со своими предпочтениями просмотра:

  1. Включение перевода субтитров и перевода аудио в реальном времени: включите главный переключатель расширения. Если у видео отсутствуют встроенные субтитры, активируйте переключатель «Real-Time Audio Translation» (Перевод аудио в реальном времени), затем выберите подходящий Source Language (например, English) и Translation Mode (например, Standard).
  2. Тип отображения субтитров (Subtitle Display Type):
    • Двуязычные субтитры (Bilingual Subtitles): отображает как оригинальную расшифровку аудио на иностранном языке, так и перевод, что позволяет легко сверять специальную терминологию и аутентичные формулировки;
    • Только перевод (Translation Only): отображает только перевод, что идеально подходит для быстрого ознакомления с содержанием видео.
  3. Позиция перевода (Translation Position): переключайтесь на панели между положениями «Below Original» (Под оригиналом) и «Above Original» (Над оригиналом), чтобы оптимизировать линию взгляда в зависимости от композиции видео.
Интерфейс воспроизведения Douyin и панель настроек Equalang: включен перевод субтитров, Subtitle Display Type установлен на «Bilingual Subtitles», Translation Position — «Below Original», включен Real-Time Audio Translation, Source Language выбран «English», а Translation Mode — «Standard»
Панель управления Equalang, развернутая справа, с двуязычными субтитрами и размещением перевода под оригиналом; субтитры слева отображают оригинал на английском и перевод на китайский

Синхронный голосовой перевод прямых трансляций

Помимо стандартных коротких видеороликов, сервис Douyin Live также официально входит в число поддерживаемых платформ на сайте Equalang.

При просмотре трансляций на иностранном языке ведущие часто говорят быстро и непрерывно без пауз. При включенной функции Real-Time Audio Translation расширение перехватывает и переводит звук прямого эфира в режиме реального времени, создавая двуязычные субтитры непосредственно поверх видеопотока, что помогает специалистам по трансграничной торговле оперативно следить за происходящим в эфире.


Ограничения и практические советы

При использовании перевода аудио в реальном времени учитывайте следующие практические рекомендации и ограничения:

  1. Не обязательно включать звук видео вручную: согласно политикам автовоспроизведения в современных браузерах, видео при открытии страницы может запускаться с выключенным звуком. Перевод аудио в реальном времени корректно работает даже при беззвучном автовоспроизведении.
  2. Четкость речи влияет на точность распознавания: для перевода в реальном времени требуется относительно четкий голосовой сигнал. Если фоновая музыка (BGM) или звуковые эффекты слишком громкие, либо если несколько человек говорят одновременно при сильном окружающем шуме, точность распознавания может ухудшиться.
  3. Потоковая сегментация и пунктуация: перевод в реальном времени обрабатывает входящий аудиопоток динамическими фрагментами. Разбивка на субтитры определяется преимущественно естественными паузами в речи. В конце предложений могут появляться временные знаки препинания, которые динамически обновляются по ходу звучания речи.
  4. Ограничения защищенного контента: зашифрованные потоки, защищенные авторским правом (DRM), ограничены политиками безопасности браузера; аудиопоток из них извлечь невозможно, поэтому перевод аудио в реальном времени к ним применить нельзя.

Источники