動画翻訳:英語の動画を日本語の声と字幕に

OpenDub(opendub.app)は、字幕だけでなく声まで翻訳する動画翻訳ツールです。話している内容を翻訳して、新しい言語の声で吹き替え、字幕も付けます。日本語の動画を英語にするなら、パソコンや Android のスマートフォンのブラウザで、キーもインストールも不要、無料で動画翻訳できます(5 分まで)。英語の動画を日本語にするなら、パソコンの OpenDub アプリで無料です。動画が端末から出ることはなく、吹き替えのダウンロードには無料のログインが必要です。

無料で使う方法

翻訳の方向使う場所(ブラウザ / パソコンのアプリ)吹き替えた動画のダウンロードにログインは必要?
日本語 → 英語ブラウザ(パソコンまたは Android のスマートフォン)。API キーもインストールも不要必要(無料のログイン)
英語 → 日本語パソコンの OpenDub アプリ(Mac・Windows)の OmniVoice。非商用利用に限る不要

OpenDub の動画翻訳でできること

動画翻訳のサイトやアプリの多くは字幕を付けるだけです。OpenDub は字幕も作り、そのうえで声を差し替えます。話し声を音楽から分け、書き起こし、一文ずつ元の長さに合うように翻訳して、新しい声で話させます。日本語のトップページと同じ AI 吹き替えです。

英語の動画を日本語に動画翻訳する

  • パソコンの OpenDub アプリなら無料。Mac(Apple Silicon)と Windows 向けのアプリで、話者の声をクローンする OmniVoice の音声が無料で使えます。ノート PC の CPU で 1 行 15〜35 秒ほどかかり、長さの制限はありません。モデルのライセンスは非商用利用に限られます。
  • ブラウザなら自分のキーで。Higgs Audio か ElevenLabs のキーを入れれば、何もインストールせずに 5 分までの動画を話者の声のまま日本語にできます。料金は Boson AI か ElevenLabs に直接お支払いいただきます。
  • ブラウザの無料の標準音声は日本語を話せないため、英語から日本語への動画翻訳には使えません。

日本語の動画を英語に動画翻訳する(無料)

  • ブラウザで無料。パソコンや Android のスマートフォンで、API キーもインストールも不要、試すだけならアカウントも不要で、5 分までの動画を英語に吹き替えます。Android では Chrome で動きます。
  • 標準の音声です。話者のクローンではなく、元の声が小さく下に残ります。最初の吹き替えのときだけ、最大約 750 MB のモデルをダウンロードします。
  • iPhone の無料音声はまだプレビュー版です。

動画翻訳の手順

  1. 動画を選ぶ。端末にある MP4、MOV、WebM。元の言語は自動で判別します。
  2. 吹き替え先を選ぶ:日本語や英語など、17 の言語から選べます。
  3. 吹き替えを始めてプレビューで確認します。新しい言語の字幕を映像に焼き込むこともできます。
  4. ダウンロード。吹き替えた MP4 と音声の WAV は無料のログインが必要です。ログインすると、吹き替え直さずにそのままダウンロードが続きます。

動画翻訳で得られるファイル

  • 吹き替えた MP4。
  • 吹き替え音声の WAV。
  • 両方の言語の字幕(SRT)。

動画翻訳アプリとブラウザ拡張機能

動画翻訳アプリとしては、Mac と Windows のデスクトップアプリがあり、Python や ffmpeg など必要なものはすべて中に入っています。Chrome、Edge、Firefox の拡張機能もあり、ウェブページに置かれた動画ファイル(5 分まで)か、パソコンの動画を吹き替えます。

動画翻訳でできないこと

  • 映像の口の動きは変えません。
  • YouTube などオンライン動画のリンクは受け付けません。端末にあるファイルを使います。

OpenDub はオープンソースで、ライセンスは AGPL-3.0-or-later です。お問い合わせ:hello@opendub.app。

よくある質問

動画翻訳は無料でできますか?

日本語の動画を英語にするなら、パソコンや Android のスマートフォンのブラウザで、標準の音声により API キーなしで無料で吹き替えられます(5 分まで)。英語の動画を日本語にするなら、パソコンの OpenDub アプリの OmniVoice が無料です(非商用利用)。Higgs Audio と ElevenLabs はご自身のキーで使い、料金はその提供元に直接お支払いいただきます。

アカウントは必要ですか?

試すだけなら不要です。吹き替え、プレビュー、デモにはアカウントは要りません。吹き替えた動画(MP4)や音声(WAV)をダウンロードするときは無料でログインし、そのままダウンロードが続きます。SRT 字幕、ブラウザ拡張機能、パソコン版アプリにはアカウントは要りません。

動画翻訳のとき、動画はサーバーにアップロードされますか?

いいえ。動画はお使いの端末に残ります。ブラウザの無料の音声ではすべてタブの中で行われます。Higgs Audio や ElevenLabs を使う場合、選んだ音声モデルに送られるのは話し声のクリップとテキストだけで、動画は送られません。

動画翻訳で元の話者の声は残りますか?

ブラウザの無料の音声では残りません。標準の音声で、元の声が小さく下に残ります。声をクローンするには、パソコンの OpenDub アプリの OmniVoice か、ご自身のキーで Higgs Audio か ElevenLabs を使います。

映像の口の動きも変わりますか?

いいえ。OpenDub は声を差し替え、映像はそのままです。吹き替えた各文は、話者がその文を話した長さに合わせてあります。

opendub.app で動画翻訳する · Blog