
Diffusion Studio
Diffusion Studio · 動画 · コーディング
Diffusion Studioは、コーディングエージェントを動画編集者に変えるプロ向けのAI動画編集ツールだ。ブラウザエディタ、macOSデスクトップアプリ、オープンソースのコードベースという3つの形で提供される。Claude Code、Codex、Cursor、そのほかのコーディングエージェントに素材を分析させ、クリップを切り、音声を文字起こしし、メディアを生成し、モーショングラフィックスを組ませられる。これはエージェント型動画編集のもっとも文字どおりの形である。編集はすべて実際のコードベースに書き込まれるので、確認し、変更し、後で再利用できる。しかもこの製品はオープンソースの動画編集ツールでもあり、この分野では珍しい。

Diffusion Studio について
Diffusion Studioとは
Diffusion Studioは、同時に2種類のユーザーに向けて作られた動画編集ツールだ。素材を手作業で編集したい人と、作業をAIエージェントに任せたい人である。このプロジェクトは単純な考えに立っている。編集内容を閉じたタイムライン形式に隠すのではなく、エージェントが読み、書き、レンダリングできる実際のコードとしてすべての変更を書き出す。「これを切ってとエージェントに頼む」ワークフローが成り立つのは、まさにこの仕組みがあるからだ。
インターフェースは、シーンを配置する無限キャンバスと、順序とタイミングを決めるタイムラインに分かれる。2つのビューの内容は常に連動し、キャンバス上で素材を動かせばタイムライン上の位置も保たれる。シーンは単なる動画にとどまらない。HTML、WebGL、3D、シェーダーに対応し、標準的な編集ツールでは得られない効果を扱える。
最大の難点は対応プラットフォームだ。ブラウザ版はWindows、macOS、Linuxで動き、この部分は無料である。ただしエージェント型編集のワークフローにはデスクトップアプリが必要で、デスクトップアプリはmacOS版しか出ていない(macOS 12以降、M1チップ以降)。Windows用のデスクトップ版はまだない。つまりWindowsを使っていてエージェントに編集させたいなら、今は待つしかない。ブラウザでサインインして編集はできるが、この製品を際立たせている部分は使えない。
はじめかた
- Webアプリを開き、サインインするかDiffusion Studioのアカウントを作成する。
- エージェント型編集を使いたいならmacOSアプリをダウンロードし、macOS 12以降でM1チップ以降であることを確認する。
- Diffusion Studioのメニューから
dapiを有効にし、Diffusion Studioのスキルをコーディングエージェントに一度だけ追加する。 - 素材を読み込み、キャンバスでシーンを配置し、タイムラインで並べる。
- エージェントに変更を頼むか手作業で編集し、同じワークスペースから4Kまで直接書き出す。
AIツール情報
Diffusion Studioの料金、対応プラットフォーム、性能を簡単に確認できます。
こんな人におすすめ
このツールが最も力を発揮するユーザー、タスク、シーン。
ユーザー
- Claude Code、Codex、Cursorをすでに使っている開発者
- 単調な切り作業を減らしたい個人クリエイター
- 小規模な制作チーム
- モーショングラフィックスのデザイナー
タスク
- 長い素材の粗切り
- 自動字幕とローカライズ
- Bロールと音声の生成
- 再利用できる編集レシピの作成
シーン
- 定期的なSNSコンテンツ
- ローカライズしたキャンペーン
- アイデアの素早い試作
主な機能
コーディングエージェントによるエージェント型編集
Diffusion StudioはClaude Code、Codex、Cursor、Copilot、Gemini CLI、そのほかのコーディングエージェントで動く。macOSアプリを入れ、メニューからdapiを有効にし、スキルを一度追加すれば、あとは好みのエージェントを使い続けられる。そこからエージェントが素材を分析し、編集し、コンポジションを組み立てる間、自分の手元で状況を追える。エージェントが作ったものはすべて自分で編集できる。自分の変更を起点にエージェントが作業を続けることも可能だ。
正となる情報源としてのコード
編集はすべて実際のコードベースに書き込まれ、プロジェクトはいまローカルに置かれ、コードがデータベースの役割を果たす。編集判断を再利用できるスキルにでき、変更はすべてGitで追えるということだ。コンポジションはTSXとして書かれるので、チームは再利用可能なコンポーネントを共有の参照としてGitHubに置ける。編集にバージョン履歴がほしいと思ったことがあるなら、これはまさにその形だ。要するにGitである。
キャンバスとタイムラインを1つに
エディタは、シーンと素材を空間的に配置する無限キャンバスから始まり、順序とタイミングを決めるタイムラインに切り替わる。2つのビューは連動したままなので、視覚的な文脈を失わずに整理し、反復できる。従来のノンリニア編集のレイアウトというより、デザインツールの手触りだ。パン、ズーム、スクラブの反応は120ミリ秒未満だと同社は説明する。速い。
AIによる素材分析と文字起こし
エージェントに素材を見せ、視覚的にも文字起こしを通じても、何が起きているかを理解させる。最良の瞬間を見つけ、退屈な部分を除き、無音やつなぎ言葉を整え、画面に映っているものや話されている内容を軸に編集を組む。長いインタビューやVlogの素材でもっとも時間を節約できる部分だ。大幅な時短になる。
エディタ内でのメディア生成
プロンプトから動画、画像、音楽、音声、効果音を生成できる。エディタ内でもエージェント経由でも可能だ。自動字幕は精密なタイミング、装飾したテキスト、アニメーションのプリセットで任意の言語に入る。クレジットはAIモデルが動くときだけ消費される。手作業でモーショングラフィックスを組んでも追加費用はかからない。
精密なプロパティとモーションの制御
1つのインスペクタでタイミング、位置、拡大縮小、レイアウトを扱う。視覚効果は積み重ねられ、音声のミックスやフィルタもエディタを離れずに適用できる。モーションにはベジェ曲線、スプリングのイージング、モーションのプリセットがある。タイトルの入りも、当てずっぽうではなく意図して動かせる。
定期的なプロジェクト向けのカスタムコントロール
データ駆動プロジェクトの内容、デザイン、編集ルールを定義し、1回の選択でバージョンを切り替えるか、エージェントにバリエーションをまとめて作らせる。同じプロジェクトが、ローカライズ動画、製品カタログ、定期的なレポート、SNS投稿に使える。同じフォーマットを何度も出すチームほど、これを活かせる。大きな見返りがある。
メリットとデメリット
メリット
- MPL 2.0の下で無料かつオープンソース。エディタ、`dapi` CLI、スキルを網羅し、4Kまでの書き出しが無制限で、ウォーターマークもない。
- すでに使っているコーディングエージェントで動くので、新しく採用するエージェントがない。
- エージェントが行った編集はすべて手作業で完全に編集でき、エージェントは自分の手動変更も引き継げる。
- モーショングラフィックスとWebGL、3Dの対応により、単純な動画編集ツールにはない守備範囲を持つ。
- ブラウザ版はWindows、macOS、Linuxをカバーし、手作業の編集ができる。
デメリット
- エージェント型編集にはmacOSデスクトップアプリが必要で、Windows用デスクトップ版はまだないため、Windowsユーザーは中核のエージェントワークフローを使えない。
- MacアプリはmacOS 12以降でM1チップ以降が必要で、古いIntel Macは対象外になる。
- AIの操作はクレジットを消費するので、生成や文字起こしを大量に使うと有料プランへ早く移ることになる。
- 月次のクレジットは繰り越されないので、使わなかった分は毎回の請求日に失われる。
よくある質問
はい。エディタは完全に無料でオープンソースだ。完全なエディタ、dapi CLI、エージェントスキル、エージェント型ワークフロー、そしてウォーターマークなしの4Kまでの無制限の書き出しを網羅する。クレジットを消費するのは、Diffusion StudioがAIモデルを動かすときだけだ。素材の分析、文字起こし、メディアの生成などがそれにあたる。有料プランはこうしたAI操作のクレジットを買うもので、エディタへのアクセスではない。
関連コンテンツ
Diffusion Studioに関連するツール、スキル、記事を探す。
Diffusion Studioの代替ツール
Vadu AI
Vadu AI · 画像 · 動画Vadu AIは、書いたプロンプトや静止画を短いクリップに変えるウェブベースのAI動画ジェネレーターで、単体で画像を生成することもできる。作りたい内容を打ち込み、モデルとスタイルを選べば、プラットフォームが数分で結果を書き出す。無料プランは軽い試し書きをまかなえる範囲で、有料プランは消費するクレジットに応じて月9ドルから77.40ドルまで幅がある。
Mykaraoke Video
MyKaraoke Video · 動画Mykaraoke Videoは、オンラインで使えるカラオケ動画・歌詞動画メーカーだ。どんな曲でも、ブラウザ上で歌詞を同期した完成動画に変える。面倒な部分を代わりに処理してくれる。AIがミックスからボーカルを抜き出し、歌詞をビートに合わせ、その後で背景やフォント、色をカスタマイズしてから1080pのMP4で書き出せる。SNS向け、パーティー用、音楽プロモーション用に歌詞動画を作るなら、ソフトのインストールも手作業のタイミング合わせも丸ごと省ける。 一晩を丸ごと奪わないカラオケ動画ジェネレーターが欲しい?それがこのツールの売りだ。
Finalframe
Finalframe · 動画Finalframeは、動画クリップから正確なフレームを取り出すための無料ブラウザツール群だ。最も有名な機能である「最後のフレーム抽出」では、あらゆる動画の最後のフレームを取り出し、Luma Dream Machine、Runway、KlingといったAI動画ツールの開始画像として使える。クリップを続けたいなら、その最後のフレームが起点になる。ツールは自分のブラウザ上で動き、登録も費用も不要だ。同じチームによる別の有料AI動画生成アプリは、作り直しのため現在オフラインだ。
