Toonflow - オープンソースのオールインワンAI短編ドラマ制作ツール

Toonflowとは何ですか？

Toonflowは、オープンソースのオールインワンAI短編ドラマ制作ツールです。小説や脚本を、マルチエージェント連携によって構造化された脚本、インテリジェントなストーリーボード、キャラクタービジュアル、アニメーションビデオへと自動的に変換します。小説から脚本、ストーリーボード、ビデオまで、エンドツーエンドのAI自動化制作を実現します。Windows、macOS、Linuxといったクロスプラットフォームのデスクトップ展開に対応し、すべてのデータはローカルに保存されるため、クリエイターは低コストでビジュアルコンテンツをまとめて制作できます。

Toonflowの主な機能

• AI脚本家マルチエージェントによるコラボレーションにより、小説やアイデアが自動的にシーン、セリフ、リズムに分解され、標準的なスクリプト形式が出力されます。
• インテリジェントなストーリーボードショットサイズ、構図、照明方向、カメラワークなど、詳細な説明を含む正確なストーリーボードを自動的に生成します。
• 役割の一貫性を維持するキャラクターの外見に関するデータベースを構築し、シーンやショット間でキャラクターの外見と衣装／小道具の一貫性を高く維持する。
• AIを活用したバッチ画像生成Nano Banana、GPT Image 2、Keling、Jimeng、Hailuoといった主流の画像モデルを深く統合し、バッチ生成をサポートしています。
• 動画合成出力吹き替え、字幕作成、編集を自動的に完了し、完成した作品は直接公開できます。縦長9:16と横長16:9の両方のフォーマットに対応しています。
• インフィニットキャンバスワークベンチ無限のキャンバスのようなフォーマットを使用して、スクリプト、キャラクター、ストーリーボード、素材、ビデオノードを自由に配置でき、並行制作をサポートします。
• 3層構造のエージェント連携システム意思決定、実行、監督の各レベルが連携して、タスクの細分化、コンテンツの作成、品質レビュー、および改訂に関するフィードバックを網羅する。
• 永続エージェントメモリローカルONNXベクトル検索に基づくセッション間メモリシステムは、意味的想起をサポートし、複数ラウンドにわたる作成の継続性を保証する。
• プログラマブルサプライヤーシステム設定センターでTypeScriptのベンダーロジックを直接記述し、ソースコードの変更や再起動を必要とせずに、即座に反映させることができます。
• 章イベントグラフ駆動型適応元の章からイベントを自動的に抽出し、構造化された形式で保存します。スクリプトの改変版では、イベントマップに基づいてコンテキストを正確に呼び出すことができます。

Toonflowの技術原則

• マルチエージェントコラボレーションアーキテクチャToonflowは、意思決定層、実行層、監視層の3層からなるエージェントコラボレーションシステムを採用しています。ディレクターエージェントは、物語全体のペースとタスクの優先順位を調整します。脚本家エージェントは、小説を標準的な脚本に変換し、劇的な葛藤を最適化する役割を担います。ストーリーボードエージェントは、ショットサイズ、構図、照明、カメラの動きなど、正確なストーリーボードの説明を生成します。一貫性エージェントは、シーン間でキャラクターの特徴を安定させるために、キャラクターの外見データベースを構築します。品質検査エージェントは、プロットの論理的な欠陥やキャラクターの矛盾を自動的にレビューします。そして、声優エージェントは、キャラクターの声をマッチングさせ、複数のキャラクターの音声合成スクリプトを生成します。すべてのエージェントは、Vercel AI SDKに基づいて並行して連携し、Socket.IOを介してリアルタイムで通信することで、実際の映画制作チームにおける分業をシミュレートします。
• 永続的な記憶と文脈の保持このシステムは、ローカルONNXベクトル取得に基づくセッション間メモリシステムを採用しており、ローカル埋め込み推論には@huggingface/transformersを使用しています。このメモリシステムは、短期的なメッセージキャッシュ、長期的な要約圧縮、および意味的リコールをサポートし、キャラクター設定、プロット展開、およびスタイル設定が複数回の作成過程で失われることがないようにすることで、章をまたいだ連続的な物語展開を可能にします。
• 章イベントグラフ駆動型適応長編小説の翻案における情報損失の問題に対処するため、Toonflowは原作から章レベルのイベントを自動的に抽出し、構造化されたイベントグラフを構築します。脚本の翻案中、システムはテキスト全体を一度に読み込むのではなく、イベントグラフに基づいて関連するコンテキスト断片を正確に呼び出します。これにより、トークンの消費を制御しつつ、翻案された脚本と原作のプロットとの忠実度を高く維持します。

Toonflowの使い方

• ダウンロードしてインストールするGitHubのリリースぺージにアクセスして、お使いのシステム用のインストールパッケージをダウンロードし、インストールしてからアプリケーションを起動してください。
• 構成モデル設定センターで、テキスト、画像、動画のモデルプロバイダーAPIを設定します。
• プロジェクトを作成するデフォルトアカウント（admin / admin123）でログインし、新しいプロジェクトを作成して、オリジナルの小説または創作テキストをインポートしてください。
• イベントの抽出章ごとの出来事を抽出し、原作のイベントグラフを自動的に構築することで、その後の翻案作品に正確な文脈情報を提供する。
• AI脚本家ScriptAgent を使用すると、ストーリーの骨子、翻案戦略、構造化されたスクリプトを生成し、複数回の反復的な最適化をサポートします。
• ストーリーボード制作ProductionAgentに切り替えると、ストーリーボードのノードを無限キャンバス上に整理し、キャラクターやシーンのアセットをバッチ処理で生成できます。
• ビデオ生成このプログラムは、ストーリーボード上でノードベースの微調整を行い、ビデオクリップを生成し、吹き替え、字幕、編集を自動的に完了させ、最終成果物をエクスポートします。

Toonflowの主な利点

• プロセス全体の自動化テキスト作成から完成品まで、すべてワンストップで完結するため、複数のツールを切り替える必要がなくなり、クリエイティブな効率が10倍以上向上します。
• マルチエージェントコラボレーション監督、脚本家、絵コンテ担当者、整合性エンジニア、品質検査官、声優、その他の関係者が並行して協力することで、単一のLLM（法学修士）作品よりもはるかに優れた成果物の品質が実現する。
• キャラクターアンカーシステムAI短編ドラマにおける「キャラクターの顔が変わる」という根本的な問題を解決し、シーン間でキャラクターの外見に高い一貫性を維持する。
• モデル非依存型アーキテクチャ特定のプラットフォームに縛られることなく、主流の画像／動画モデルへの無料アクセスをサポートし、モデルのローカル展開もサポートします。
• データは完全にローカルですすべてのデータはローカルに保存され、第三者のサーバーを経由しないため、プライバシーとセキュリティが確保されます。
• バッチ生産工場の効率小説全体の一括変換に対応し、ペース配分と密度を自動的に計画し、一人で生産ライン全体を管理できます。

Toonflowの類似製品の比較

Toonflowの応用事例

• ショートビデオコンテンツ制作Douyin、Kuaishou、Bilibili、YouTubeなどのプラットフォーム向けに最適化されたAI短編ドラマを迅速に生成します。
• 小説を映画化する試みその目的は、オンライン小説を自動的に映像化された短編ドラマに翻案することで、知的財産権の映像化の可能性を検証することである。
• AIを活用した文学作品の翻案ツールこれにより、文学作品の制作者は、テキストを自動的に動画に変換する機能を利用できるようになります。
• スクリプト開発とラピッドプロトタイピング映画やテレビの制作チームは、脚本のプロトタイプや絵コンテのプレビューを迅速に作成できるため、初期段階での試行錯誤にかかるコストを削減できます。
• ビデオ映像の生成キャラクターデザインスケッチ、シーンコンセプトアート、ビデオクリップ、その他のクリエイティブ素材を一括生成する。