
AI短編ドラマの分野が現在、爆発的な盛り上がりを見せています。ネット小説のIP(知的財産)の翻案からショート動画プラットフォームでの配信まで、テキスト内容を素早く視覚的な短編ドラマへと変換できるツールは、コンテンツクリエイターにとって今や欠かせないニーズとなっています。
Toonflow は、HBAI Ltdによって開発され、GitHub上でオープンソース(AGPL-3.0ライセンス)として公開されている、AI短編ドラマ・マンガ動画の自動制作ツールです。その核心となる能力は、小説や脚本のテキストから、AIを通じてキャラクターの抽出、脚本の生成、絵コンテの描画、そして動画合成までの全プロセスを自動で完結させることにあります。
Toonflow自体にはAIモデルが内蔵されているわけではなく、AI Agent(AIエージェント)のオーケストレーションエンジンとして機能し、以下の3つのカテゴリーの外部AIサービスを連携させて作業を遂行します。
| AI サービスタイプ | 用途 | 推奨モデル |
|---|---|---|
| 大規模言語モデル(LLM) | キャラクター分析、脚本生成、絵コンテ用プロンプト | GPT-4o、Claude 4 Sonnet など |
| 画像生成モデル | キャラクター造形、シーンの挿絵、絵コンテ画面 | Nano Banana Pro |
| 動画生成モデル | 絵コンテ画面から動画クリップへの変換 | Sora、豆包動画 |
🚀 クイックスタート:Toonflowに必要なLLM、画像生成、動画生成の3種類のAPIサービスは、すべて APIYI(apiyi.com) で一括取得可能です。複数のプラットフォームに個別に登録する必要はなく、わずか5分ですべての設定が完了します。
本記事では、Toonflowの主要機能の紹介、インストールとデプロイ、そしてAPIサービスの設定という3つの側面から、このAI短編ドラマ制作ツールの使い方を素早くマスターできるよう解説します。
Toonflow AI 短編ドラマツールの4大核心機能
Toonflow は、小説を短編ドラマに変換するプロセスを4つの自動化フェーズに分解しており、各フェーズは対応する AI サービスによって駆動されます。
機能一:AI キャラクターの自動抽出と生成
Toonflow は、大規模言語モデルを呼び出して入力された小説のテキストを深く分析し、キャラクター情報を自動的に識別・抽出します。
| 抽出次元 | 説明 | 例 |
|---|---|---|
| 外見の特徴 | キャラクターの外見描写。キャラクターの立ち絵生成に使用 | 黒い長髪、青い瞳、白いロングドレス |
| 性格の特徴 | キャラクターの行動パターンや心理的特徴 | 冷静沈着、内向的で繊細 |
| 身分・背景 | キャラクターの社会関係と物語内での役割 | 会社のCEO、ヒロインの親友 |
| キャラクターカード | 上記の情報を統合して生成された視覚的なキャラクターカード | 立ち絵 + テキスト紹介を含む |
キャラクター抽出の質は、その後の絵コンテ画面におけるキャラクターの一貫性を直接左右します。Toonflow は構造化されたプロンプトテンプレートを使用することで、LLM が出力するキャラクター描写をそのまま画像生成のプロンプトとして利用できるようにしています。
機能二:インテリジェントな脚本と絵コンテの生成
ユーザーがアダプテーション(翻案)したい章を選択すると、Toonflow は以下の処理を自動で行います。
- 小説の段落を構造化された脚本(セリフ、シーン描写、ト書きを含む)に変換
- 各シーンの絵コンテプロンプト(前景・中景・背景の構図、キャラクターの動き、小道具、カメラアングルを含む)を生成
このステップは完全に LLM によって実行され、生成された絵コンテプロンプトは直接画像生成モデルへと渡されます。
機能三:AI 画像生成と絵コンテの描画
Toonflow は絵コンテプロンプトを画像生成 API に送信し、各フレームの絵コンテ画面を自動生成します。現在サポートされている画像生成バックエンドは以下の通りです。
- Nano Banana Pro:4K 解像度の出力をサポートし、キャラクターの一貫性が高く、多言語のテキストレンダリングにも対応しています。
- 火山エンジン(Volcengine):ByteDance 傘下の画像生成サービス。

機能四:AI 動画合成とオンライン編集
最後のステップとして、Toonflow は絵コンテ画像を動画生成 API を通じて動的な動画クリップに変換します。また、オンライン編集機能を提供しており、ユーザーは生成された結果を個別に調整することが可能です。
サポートされている動画生成サービスには、Sora(OpenAI)や豆包(Doubao)動画生成 API などがあります。
Toonflowのインストールとデプロイ:ニーズに合わせた3つの方法
Toonflowは、Windowsデスクトップアプリ、Dockerデプロイ、手動デプロイの3種類のインストール方法を提供しています。
Toonflow システム要件
| 項目 | 最小要件 |
|---|---|
| Node.js | v23.11.1 以降 |
| メモリ | 2GB以上 |
| OS | Windows(デスクトップ版)/ Linux(サーバーデプロイ) |
| ネットワーク | 外部AI APIサービスへのアクセスが必要 |
方法1:Windows デスクトップアプリ(初心者におすすめ)
GitHub ReleasesからElectronデスクトップインストールパッケージを直接ダウンロードします。
- GitHubプロジェクトURL:
github.com/HBAI-Ltd/Toonflow-app - デフォルトログインアカウント:
admin - デフォルトログインパスワード:
admin123
ダウンロードしてインストールするだけで実行可能です。デスクトップ版にはバックエンドサービスが内蔵されているため、追加の環境構築は不要です。
方法2:Docker デプロイ(サーバー推奨)
# プロジェクトをクローン
git clone https://github.com/HBAI-Ltd/Toonflow-app.git
cd Toonflow-app
# Docker Composeを使用してワンクリックで起動
docker-compose -f docker/docker-compose.yml up -d --build
起動後、http://localhost:60000 にアクセスして管理画面に入ります。
方法3:手動デプロイ(開発者向け)
# 依存関係のインストール
yarn install
# 開発モードで起動(バックエンドのみ、ポート 60000)
yarn dev
# デスクトップアプリ + バックエンドを同時に起動
yarn dev:gui
# 本番用ビルド
yarn build
手動デプロイの場合は、サービスの安定稼働のために PM2 などのプロセス管理ツールの使用を推奨します。
Toonflow APIサービス設定:3種類のAIインターフェース完全連携ガイド
Toonflowのインストール完了後、正常に使用するためには3種類のAIサービスのAPIインターフェースを設定する必要があります。これは設定プロセス全体の中で最も重要なステップです。
🎯 設定のアドバイス:統合APIサービスプロバイダーとして APIYI (apiyi.com) の使用を推奨します。このプラットフォームは、LLM、画像生成、動画生成の3種類のAPIを統一されたインターフェースで提供しており、同じ base_url と認証方式を使用できるため、Toonflowの設定作業を大幅に簡素化できます。
設定1:大規模言語モデル(LLM)API 連携
Toonflowのキャラクター分析、脚本生成、絵コンテプロンプト生成機能はすべてLLMに依存しています。設定時にはOpenAI互換形式のAPIインターフェースを提供する必要があります。
推奨モデルの選択:
| モデル | 適用シーン | 特徴 |
|---|---|---|
| GPT-4o | 汎用シーン、高品質な脚本 | 理解力が高く、出力が安定 |
| Claude 3.5 Sonnet | 長編小説の分析 | 長いコンテキストに強い |
| DeepSeek V3 | コストを抑えたい場合 | コスパが非常に高い |
| Gemini 1.5 Pro | マルチモーダル分析 | 画像とテキストの混合入力に対応 |
設定パラメータの例:
Toonflowの設定ページで以下の情報を入力します:
インターフェースURL(base_url): https://api.apiyi.com/v1
APIキー: あなたの APIキー
モデル名: gpt-4o(またはその他の対応モデル)
💡 ヒント:設定完了後、Toonflow設定ページにある「モデルチェック」ボタンをクリックして、APIの疎通確認を行うことができます。この機能は v1.0.2 バージョンで追加されました。
設定2:Nano Banana Pro 画像生成 API 連携
Nano Banana Pro は Toonflow 推奨の画像生成モデルで、テキストから画像生成(text-to-image)と画像から画像生成(image-to-image)の両方のモードをサポートし、最大 4K 解像度の出力をサポートしています。
Nano Banana Pro の主要パラメータ:
| パラメータ | 説明 | 推奨値 |
|---|---|---|
| モデル名 | API呼び出し時の model パラメータ | nano-banana-pro |
| 解像度 | 出力画像の解像度 | 2K(絵コンテ用)または 4K(表紙用) |
| 画像比率 | アスペクト比 | 16:9(横型ショートドラマ)または 9:16(縦型ショートドラマ) |
| スタイル制御 | プロンプトによる画風制御 | アニメ風、実写風、水彩風など |
設定パラメータの例:
インターフェースURL(base_url): https://api.apiyi.com/v1
APIキー: あなたの APIキー
画像モデル: nano-banana-pro
Nano Banana Pro は顔の一貫性に優れており、複数の絵コンテで同一のキャラクターイメージを維持する必要があるショートドラマ制作に特に適しています。
設定3:Sora / 豆包 (Doubao) 動画生成 API 連携
動画生成は Toonflow ワークフローの最終ステップです。絵コンテ画像を動的な動画クリップに変換します。
対応している動画生成サービス:
| サービス | 特徴 | 1回あたりの生成時間 |
|---|---|---|
| Sora(OpenAI) | 画質が非常に良く、動きが自然 | 約 5〜20 秒 |
| 豆包 (Doubao) 動画 | 中国語シーンの最適化が良好 | 約 5〜15 秒 |
設定パラメータの例:
インターフェースURL(base_url): https://api.apiyi.com/v1
APIキー: あなたの APIキー
動画モデル: sora(または対応する豆包モデル名)
💰 コストに関する注意:動画生成はプロセス全体の中で最もコストがかかる工程です。まず画像生成で絵コンテの効果を確認し、満足いく結果が得られてから動画を一括生成することをお勧めします。APIYI (apiyi.com) プラットフォーム経由で呼び出すことで、より柔軟な料金体系を利用でき、ショートドラマの制作コストを抑えることが可能です。
Toonflow 完全ワークフロー実践:小説からショートドラマ制作までの5ステップ
設定完了後、Toonflowを使用してAIショートドラマを制作する際の一連の流れは以下の通りです。
ステップ1:プロジェクトの作成と小説のインポート
Toonflowの管理画面で新規プロジェクトを作成し、小説のテキスト(TXT形式)をシステムにインポートします。章ごとの自動分割機能もサポートしています。
ステップ2:AIによるキャラクター抽出
「キャラクター生成」をクリックすると、システムが自動的に大規模言語モデル(LLM)を呼び出して全文を分析し、主要なキャラクター情報を抽出してキャラクターカードを作成します。後の画像生成のクオリティを最適化するために、キャラクターの説明を手動で調整することも可能です。
ステップ3:章の選択と脚本生成
制作したい章を選択し、「脚本生成」をクリックします。LLMが小説の段落を、セリフやシーン指示を含む構造化された脚本へと変換します。
ステップ4:絵コンテ画像の生成
システムが脚本に基づいて絵コンテ用のプロンプトを自動生成し、Nano Banana Proを呼び出して各フレームの画像を生成します。このステップでは、1フレームずつプレビューして調整することができます。
ステップ5:動画合成と編集
絵コンテの仕上がりを確認した後、Soraや豆包(Doubao)ビデオAPIを呼び出して、静止画を動画に変換します。Toonflowには最終調整用のオンラインエディタも用意されています。
Toonflowの技術アーキテクチャと開発情報
| 技術スタック | 具体的な実装 |
|---|---|
| バックエンドフレームワーク | Node.js + Express + TypeScript |
| データベース | SQLite3(better-sqlite3) |
| AI SDK | Vercel AI SDK、Aigne ミドルウェア |
| 画像処理 | Sharp |
| デスクトップアプリ | Electron |
| HTTP クライアント | Axios |
| パラメータバリデーション | Zod |
| プロセス管理 | PM2(本番環境) |
| コンテナ化 | Docker + Docker Compose |
ToonflowプロジェクトはAGPL-3.0オープンソースライセンスを採用しており、個人および非商用利用は無料です。商用利用については、HBAI Ltdに連絡して商用ライセンスを取得する必要があります(連絡先メールアドレス: [email protected])。
Toonflow よくある質問 FAQ
Q1:Toonflowを利用するのにローカルGPUは必要ですか?
いいえ、必要ありません。Toonflow自体はオーケストレーションツールに過ぎず、すべてのAI推論タスクはリモートAPIを介して実行されます。お使いのPCはNode.jsとブラウザが動作する環境であれば十分です。APIYI(apiyi.com)を通じてAPIサービスに接続すれば、GPUリソースを気にする必要はありません。
Q2:Toonflowはどの画像生成モデルをサポートしていますか?
現在、主にNano Banana ProとVolcengine(火山引擎)の画像生成をサポートしています。中でもNano Banana Proは最大4K解像度に対応し、キャラクターの一貫性に優れているため、ショートドラマの絵コンテ作成に最適です。APIYI(apiyi.com)プラットフォームから直接Nano Banana Proモデルを呼び出すことができます。
Q3:ショートドラマ1話あたりのAPIコストはどのくらいですか?
コストはチャプターの長さや絵コンテの数によって異なります。一般的な目安は以下の通りです:
- LLM呼び出し(キャラクター分析 + 脚本 + 絵コンテプロンプト):約$0.5-2
- 画像生成(20-50枚の絵コンテ):約$1-5
- 動画生成(20-50個のクリップ):約$10-50
動画生成が主なコスト要因となります。APIYI(apiyi.com)の柔軟な料金体系を利用して、支出を最適化することをお勧めします。
Q4:Toonflowのロードマップはありますか?
プロジェクトでは以下の機能を計画しています:
- プロンプトブラッシュアップAgent(インテリジェントな動画プロンプト最適化)
- マルチフォーマットテキスト対応(漫画脚本、ゲームの対話など)
- キャラクターの衣装・小道具管理(長編での一貫性維持)
- バッチ処理タスクキュー
- ワンクリック・スタイル変換テンプレート
Toonflow AIショートドラマツール まとめ
Toonflowは、AIショートドラマ制作のための完全な自動化ソリューションを提供し、小説からショートドラマへのプロセスを手作業からAIパイプラインへと簡略化します。その核心的な価値は以下の通りです:
- 全プロセスの自動化:キャラクター抽出 → 脚本生成 → 絵コンテ作成 → 動画合成まで、ワンストップで完了します。
- オープンソースで無料:AGPL-3.0ライセンスにより、個人利用は無料です。
- 柔軟なAIバックエンド:特定のプロバイダーに縛られることなく、多様な大規模言語モデル、画像・動画生成モデルをサポートしています。
- 多様なデプロイ方法:デスクトップアプリ、Docker、手動デプロイなど、さまざまな利用シーンに対応しています。
Toonflowに必要なすべてのAI APIサービスを、APIYI(apiyi.com)で一括取得することをお勧めします。インターフェースと課金を一本化し、迅速な設定で創作を開始しましょう。
参考資料
-
Toonflow GitHub リポジトリ: 公式オープンソースプロジェクト
- リンク:
github.com/HBAI-Ltd/Toonflow-app - 説明: ソースコード、インストールガイド、リリース情報が含まれています
- リンク:
-
Toonflow Gitee ミラー: 中国国内からのアクセス高速化
- リンク:
gitee.com/HBAI-Ltd/Toonflow-app - 説明: 中国国内のネットワーク環境に適しています
- リンク:
-
APIYI 公式ドキュメント: AI API サービス導入ガイド
- リンク:
help.apiyi.com - 説明: LLM、画像生成、動画生成 API の利用チュートリアル
- リンク:
この記事は APIYI 技術チームによって執筆されました。AI 大規模言語モデルの活用と開発の実践に焦点を当てています。さらなる技術チュートリアルについては、APIYI(apiyi.com)をご覧ください。
