Kōdan
Serenidad · ライティング · 画像 · コーディング
KōdanはmacOS向けのオープンソースアプリで、テキストのプロンプトからアニメの絵、声、短いクリップを自分のマシン上で作れる。自分で物語を動かしたい人に向く。
Kōdan について
What Is Kōdan
Kōdanは、ペンタブではなくキーボードでアニメを作るデスクトップツールだ。自分のマシン上で動くオープンソースアニメの道具だと考えればいい。シーンを文章で書くと、アプリが絵を生成し、クローンした声で台詞を加え、各部分を短いクリップにつなぐ。macOSで動き、現在はv0.1という初期のアルファ段階にある。
他と違うのは、作業がどこで起きるかだ。Kōdanは画像・音声・動画のモデルをクラウドではなく自分のマシン上で走らせる。アニメ制作ツールでありながらコードは完全に公開されているので、各工程の中身を読み、モデルを差し替え、プロジェクトを自分のディスクに置いておける。流れは独立した部品で組み立てられ、絵にはStable Diffusionのベースモデルと任意のLoRAスタイル、声にはXTTSモデル、字幕と最終出力にはffmpegを使う。
制約も機能と同じくらい重い。動くのはmacOSだけで、配布されるビルドはApple silicon向けだ。そのためWindowsとIntel版Macの利用者は今のところ締め出される。アルファ版なので荒さが残り、安定性の保証もない。ローカルでの生成はハードウェアにも左右され、モデルファイルは自分で用意することが前提で、全部入りでは提供されない。
Getting Started
- Kōdanの公式サイトでアルファ版を申し込み、ダウンロードリンクを受け取るメールアドレスを入力する。
- arm64のディスクイメージを開き、Apple siliconのMacにアプリをインストールする。
- オープンソースのリポジトリをクローンし、選んだベースモデルとLoRAファイルをModelsフォルダに置く。
- アプリでシーンのプロンプトを書き、声を選び、各カットの絵と音声を生成する。
- プロジェクトをクリップにレンダリングし、完成ファイルを書き出す。
AIツール情報
Kōdanの料金、対応プラットフォーム、性能を簡単に確認できます。
こんな人におすすめ
このツールが最も力を発揮するユーザー、タスク、シーン。
ユーザー
- アニメ好き：シーンを書けば絵と声とクリップが手に入る。絵心は要らない。ただしApple siliconのMacを使い、モデルファイルを自分で用意するのが条件だ。
- オープンソースを触りたい人：コードはすべてGitHubにあるので、流れを読み、モデルを差し替え、部品を自分の発想で組み直せる。
- プライバシーを気にする作り手：生成は自分のマシンで起きるため、プロンプトやプロジェクトが他人のサーバーに渡らない。
- 予算の限られた個人作家：ローカル生成なら画像ごとの課金を避けられる。代わりにハードウェアを求める。
タスク
- テキストからシーンを生成する：情景を書くと合った静止画が出てくる。あとはプロンプトを調整して作り直す。
- キャラクターに声を当てる：XTTSモデルが選んだ声で台詞を読む。声は短い参照クリップから取る。
- 短い流れを組む：絵と音声の部品がクリップにまとまり、1つのファイルにレンダリングされる。
- シーンに字幕を焼き込む：字幕ツールが指定の書体・色・縁取りで文字を絵の上に描く。
- LoRAで画風を寄せる：スタイルファイルを読み込み、絵を特定の方向へ寄せる。
シーン
- 家で同人ショートを作る：1人で、書いたアイデアからノートPCで見られるクリップまでたどり着ける。
- 物語のアイデアを試す：本格制作に入る前に、実際の絵と声でシーンがどう見えるかを確かめる。
- 生成の流れを学ぶ：部品が公開されているので、画像・音声・動画のモデルが一緒に動く様子を眺められる。
- オフラインで作業する：素材をクラウドに上げられない人でも、手元でシーンを組み立てられる。
主な機能
自分のマシンでのローカル生成
Kōdanは画像・音声・動画のモデルをクラウドではなく自分のMacで走らせる。だからプロンプトとプロジェクトは手元のディスクに残り、画像ごとのクレジットも消費しない。代償はハードウェアだ。性能の高いApple siliconのマシンほど負荷に耐え、生成はホスティングサービスより時間がかかる。
テキストからアニメの絵を作る
絵の工程はStable Diffusionの流れを使い、書いたプロンプトをアニメ調の静止画に変える。つまりアプリはローカルで動くAIアニメ生成として機能する。プロンプトとネガティブプロンプトを自分で制御し、カットごとに決まった回数の推論を回す。ベースモデルは差し替えられるので、最終的な見た目は読み込むモデルとスタイルファイル次第だ。
LoRAスタイルの対応
LoRAファイルを使うと、ベースモデルを一から学習し直さずに特定の画風へ寄せられる。スタイルファイルをModelsフォルダに置き、ベースモデルと一緒に読み込む。狙った見た目を追う人にとって、これは既定の無難な絵から離すための主な手段になる。
XTTSによる声のクローン
声の工程はXTTSモデルを使い、選んだ声で台詞を読ませる。短い参照クリップからサンプルを取るので、同じ声をシーンをまたいで使い回し、キャラクターの声を保てる。作業のすべてが手元で完結する点が、これを本物のローカルAIの流れにしている。音声がマシンの外に出ることもない。アプリにはいくつかのサンプルボイスが付き、長い台詞は生成前に分割される。
字幕とキャプション
字幕ツールは、選んだ書体・色・縁取りで文字をシーンの上に描く。画面より高い解像度で文字を描いてから縮小するので、文字の輪郭が保たれる。読める字幕を絵に直接焼き込みたい人に向く。後から編集ソフトで足す手間はいらない。
プロジェクトのレンダリングと書き出し
レンダリングの工程は、プロジェクトの画像とクリップを集め、シーン番号で並べ、ffmpegで1本の動画につなぐ。クリップが欠けていれば、数秒静止する画像で埋める。出来上がるのは共有できるファイルで、プロンプトから完成したアニメのシーンまでの最後の工程だ。
メリットとデメリット
メリット
- すべて自分のマシンで動くので、プロンプトとプロジェクトは手元に残り、画像ごとの課金もない。
- コードは完全に公開されていて、各工程を確かめ、流れそのものを変えられる。
- 絵・声・字幕が別々の工程に分かれ、短いアニメクリップの要素を1つではなく幅広くカバーする。
- ベースモデルの差し替えとLoRAファイルで、絵のスタイルを実際に制御できる。
- 長い台詞は自動で分割され、台本全体で音声生成が止まる事態を避けられる。
デメリット
- 動くのはmacOSだけで、アルファ版はApple silicon向けなので、WindowsとIntel版Macの利用者は使えない。
- v0.1のアルファ版なので、荒さ、仕上がりの粗さ、更新間の不具合を覚悟する必要がある。
- 生成の品質は自分で用意するモデル次第で、そのファイルは自分で探して置かねばならない。
- ローカル生成は遅くハードウェアに縛られるため、性能の低いマシンほどシーンごとの待ち時間が延びる。
よくある質問
Kōdanはテキストからアニメを作るmacOS向けのオープンソースアプリだ。シーンを書くと絵を生成し、声クローンのモデルで音声を加え、各部分を短いクリップにレンダリングする。モデルはクラウドではなく自分のパソコンで走る。macOSアプリとして、手元で完結する点が特徴だ。
関連コンテンツ
Kōdanに関連するツール、スキル、記事を探す。
Kōdanの代替ツール
Emailwritr
Emailwritr · ライティング · マーケティングEmailwritrは、すでに持っているリストからより多くの収益を引き出したいアフィリエイター、コース制作者、オンラインビジネス向けに作られたAIメールコピーライティングツールだ。空白のページや汎用的なチャットボットのプロンプトの代わりに、このAIメール作成ツールは、著名なダイレクトレスポンスのコピーライターを手本にしたフレームワークから、ウェルカムシーケンス、ローンチキャンペーン、カート放棄メール、プロモシリーズを生成する。自分のオートレスポンダーをつなぎ、オファーについて2、3の質問に答えると、あとは文案を書いてくれる。
Swms
Swms AI · ライティング · 生産性向上 · ビジネスSwmsは、仕事の簡単な説明をそのまま使える安全書類に変えるAI安全コンプライアンスツールだ。プロジェクト、職種、把握している危険を書けば、安全作業方法書、作業ハザード分析、安全作業手順書、RAMS、安全データシートを数秒で作成する。Oscarというチャットアシスタントも付いており、職場の安全に関する質問にどんな言語でも答える。建設、鉱業、運輸、倉庫のチームが、作業日を削る書類仕事を減らすために使っている。
Prosp
Prosp · ライティング · 音声・言語 · マーケティングProspは、代理店や営業チーム向けに作られたAI LinkedInアプローチツールだ。見込み客ごとに自分の声でメッセージとボイスメッセージを書き、相手が本当に返信するように仕向ける。アカウントをつなぎ、リードを見つけ、AIにパーソナライズされたメッセージを大量に下書きさせて送信させる。すべて1つの受信トレイから行える。大量のアウトバウンドを回す人向けにできている。それがこの製品の売り込みのすべてだ。それでも各接点は人間らしく感じられなければならない。