Dub AI - Voice Generator

Dub AI は動画の発話を取り出して翻訳し、翻訳後の音声を、汎用のナレーターではなくあなた自身の声で映像に重ねる。これが単なる字幕や機械的な読み上げとの違いだ。人が話しているクリップ向けに作られているので、インタビューや Vlog、短い説明が他の形式より向く。

看板機能はリップシンクだ。翻訳のあと、Dub AI は映像の口の動きを新しい音声に合わせる。話し手が翻訳後の言葉を言っているように見える。これで吹き替えクリップは、ずれが一目で分かるものではなく、見られるものになる。仕上がりは元映像の鮮明さに左右される。明るくはっきりした顔のほうがモデルに判断材料を多く与えるからだ。

多段階の書き出し工程ではなく、翻訳と吹き替えを短い流れにまとめている。動画を選び、目標言語を指定して実行するだけだ。第二言語の版を、パソコン編集が必要な企画ではなく、スマホで数分で作れるものにするのが狙いだ。動画翻訳アプリとして、翻訳と吹き替えを一つの流れにまとめている。この AI 音声生成の仕組みは、どの版でもあなたの声質を保つ。

アプリは複数の言語に翻訳できるので、1 回の収録が元の言語を話さない視聴者にも届く。複数の地域に公開する人にとっては、1 回の撮影で各動画が複数の使える素材になる。

Dub AI は、スマホで撮って SNS に出す動画の形を前提に設計されており、長い制作物より短く話すクリップを優先する。流れはアプリの中で完結するので、動画編集を仕事にしていない人にも敷居が低い。

無料の入口と有料オプションを備えた Android アプリとして出ており、新規利用者はお金を払う前に中核の吹き替えの流れを試せる。スマホ専用ということは、パソコンの流れではなく外出先での利用を前提にした体験だということで、短いクリップへの注力と噛み合っている。