Douyin動画・ライブ配信をリアルタイム翻訳する方法:2言語字幕と同時通訳

Equalang

この記事の要点

Douyinのウェブ版で外国語のショート動画やライブ配信を視聴する際に、2言語並列字幕やリアルタイムの音声通訳を有効にする方法を分かりやすく解説します。

キーワード: Douyin 2言語字幕; Douyin リアルタイム翻訳; Douyin ライブ配信翻訳; Equalang; リアルタイム音声翻訳

越境ECに向けたリサーチや、海外の競合アカウントのベンチマーク、あるいは純粋な外国語コンテンツの視聴など、デスクトップブラウザでDouyinのウェブ版を利用するチームが増えています。

しかし、プラットフォーム上のオリジナルの外国語ショート動画の大半には中国語字幕がありません。また、海外クリエイターによるECライブ配信や複数ゲストによるコラボ配信も、台本のないフリートーク形式が一般的で字幕が付きません。テンポの速い外国語の会話から、聞き取りだけで重要な情報を把握するのは容易ではないのが現状です。

本記事では、現在利用可能な一般的な解決策を比較し、Douyinのウェブ版でEqualangを使用して、オリジナル動画の2言語並列字幕やライブ配信のリアルタイム通訳を有効にする手順を分かりやすく解説します。

一般的な解決策の客観的比較

ウェブ上の外国語動画コンテンツを扱う際、現在主に利用できるアプローチは以下の3つがあります。

1. プラットフォーム標準の自動字幕

  • 仕組み: クリエイターが動画投稿時にプラットフォーム内蔵の音声認識を有効にしているか、外部字幕ファイルをアップロードしているかに依存します。
  • 最適な用途: クリエイターによって中国語圏の視聴者向けにローカライズされた動画。
  • 制限事項: Douyin上のオリジナル外国語ショート動画の多くは字幕トラックが有効化されていません。また、字幕がある場合でも通常は1行・単一言語の字幕のみであり、原文と訳文を並べて確認することは困難です。さらに、ライブ配信ではプラットフォーム標準の2言語字幕はほぼ利用できません。

2. 従来のウェブページ全体翻訳拡張機能

  • 仕組み: ウェブページ上の静的テキストを解析し、DOMノードのコンテンツを置き換えます。
  • 最適な用途: 動画タイトル、投稿文、ハッシュタグ、プロフィールの自己紹介、コメントなどの静的テキストの翻訳。
  • 制限事項: 動画プレーヤー内部の音声ストリームにはアクセスできないため、音声の翻訳や動的な字幕表示は行えません。

3. リアルタイム音声翻訳拡張機能(例:Equalang)

  • 仕組み: ブラウザ拡張機能経由で再生中の音声をキャプチャし、音声認識と翻訳を実行して、動画プレーヤー上に直接2言語字幕を生成します。
  • 最適な用途: 字幕のないオリジナルのショート動画、海外クリエイターのコラボ配信・ゲスト配信、越境ライブコマースのリアルタイム視聴。
  • 制限事項: 比較的明瞭な音声入力が必要です。BGMの音量が大きすぎたり過度な環境ノイズがあったりすると、認識精度が低下する場合があります。

実践ガイド:フィード動画で2言語字幕を表示する方法

ブラウザ拡張機能「Equalang」を例に、Douyinウェブ版でオリジナルの外国語音声に2言語字幕を表示する手順を紹介します。

デスクトップブラウザでDouyinのウェブ版を開き、外国語のショート動画を閲覧すると、字幕がないことを検出した際に拡張機能がリアルタイム音声翻訳を自動的に提案します。

実際にDouyinのウェブ版で字幕のない英語スピーチ動画を開いて検証を行いました。ページを読み込むと、拡張機能が動画に字幕がないことを検知し、「字幕が検出されませんでした。リアルタイム音声翻訳が自動的に有効になりました」というプロンプトが表示されました。続いてDouyinのプレーヤーで「ミュート解除」をクリックし、原文言語(Source Language)として「English(英語)」、翻訳モード(Translation Mode)として「Standard(標準)」を選択すると、動画プレーヤー上に即座に2言語字幕が表示されました。上段に英語の原文、下段に中国語の訳文が並んで表示されます。

赤いカーペットが敷かれたステージに立つ登壇者と、下部に表示されたEqualangの2行の字幕:英語の原文「Concrete and take you somewhere perhaps unexpected, but also totally relatable. Imagine walking into.」と、中国語の訳文「具体来说,带你去一个也许出乎意料、但又特别有共鸣的地方。想象一下,你走进了……」
2言語字幕が表示されたDouyinの動画再生画面。原文の「Concrete and take you somewhere perhaps unexpected, but also totally relatable. Imagine walking into.」と、その下に中国語訳の「具体来说,带你去一个也许出乎意料、但又特别有共鸣的地方。想象一下,你走进了……」が表示されている様子

主な設定項目と表示オプション

拡張機能のコントロールパネルを開くと、視聴の好みに合わせて設定をカスタマイズできます。

  1. 字幕翻訳とリアルタイム音声翻訳の有効化: 拡張機能のメインスイッチをオンにします。動画に標準の字幕がない場合は、「リアルタイム音声翻訳」をオンにし、適切な原文言語(例:英語)と翻訳モード(例:標準)を選択します。
  2. 字幕の表示タイプ:
    • 2言語字幕: 外国語の音声原文と訳文を両方表示します。専門用語や自然な言い回しを確認・照合するのに役立ちます。
    • 翻訳のみ: 訳文のみを表示します。動画の内容を手早く把握したい場合に適しています。
  3. 翻訳の配置位置: パネル内で「原文の下」と「原文の上」を切り替えることができ、動画のレイアウトに合わせて視線の動きを最適化できます。
Douyinの再生画面とEqualangの設定パネル。「字幕翻訳」が有効、「字幕表示形式」が「2言語字幕」、「翻訳の配置」が「原文の下」、「リアルタイム音声翻訳」が有効、「原文言語」が「英語」、「翻訳モード」が「標準」に設定されている様子
右側に展開されたEqualangのコントロールパネルで2言語字幕と原文の下への配置が設定され、左側の字幕に英語の原文と中国語の訳文が表示されている様子

ライブ配信でのリアルタイム音声通訳

通常のショート動画だけでなく、Douyin Live(ライブ配信)もEqualang公式サイトでサポート対象プラットフォームとして正式に掲載されています。

外国語のライブ配信では、配信者が息をつく間もなく早口で話し続けることが珍しくありません。「リアルタイム音声翻訳」を有効にしておくことで、拡張機能が配信音声をリアルタイムにキャプチャ・翻訳し、映像上に直接2言語字幕を生成してくれるため、海外事業を担当する実務担当者も配信内容を漏らさず把握できます。


制限事項と活用のコツ

リアルタイム音声翻訳を利用する際は、以下の実践的な留意点や制限事項を確認しておきましょう。

  1. 動画をミュート解除する必要はありません: 最近のブラウザの自動再生ポリシーにより、ページを開いた直後はミュート状態で再生されることがあります。リアルタイム音声翻訳は、ミュート状態の自動再生中であっても正常に動作します。
  2. 声の明瞭さが認識精度に影響します: リアルタイム翻訳には、比較的クリアな音声信号が必要です。BGMや効果音の音量が大きすぎる場合や、激しい環境ノイズの中で複数の人物が同時に発話している場合は、認識精度が低下することがあります。
  3. ストリーミングの区切りと句読点: リアルタイム翻訳は、入力される音声を動的なチャンク(塊)として順次処理します。字幕の区切りは、主に発話中の自然な休止(ポーズ)に基づいて決定されます。文末に仮の句読点が表示され、発話の進行に伴って動的に更新されることがあります。
  4. 著作権保護されたメディアの制限: 著作権で保護された暗号化ストリーム(DRM)は、ブラウザのセキュリティポリシーによって制限されています。そのため音声ストリームを抽出できず、リアルタイム音声翻訳を適用することはできません。

参考リンク