|

Toonflow を活用した AI ショートドラマの自動制作:3 ステップで小説から動画への変換プロセスの設定を完了

toonflow-ai-short-drama-comic-tool-api-guide-ja 图示

AI短編ドラマの分野が現在、爆発的な盛り上がりを見せています。ネット小説のIP(知的財産)の翻案からショート動画プラットフォームでの配信まで、テキスト内容を素早く視覚的な短編ドラマへと変換できるツールは、コンテンツクリエイターにとって今や欠かせないニーズとなっています。

Toonflow は、HBAI Ltdによって開発され、GitHub上でオープンソース(AGPL-3.0ライセンス)として公開されている、AI短編ドラマ・マンガ動画の自動制作ツールです。その核心となる能力は、小説や脚本のテキストから、AIを通じてキャラクターの抽出、脚本の生成、絵コンテの描画、そして動画合成までの全プロセスを自動で完結させることにあります。

Toonflow自体にはAIモデルが内蔵されているわけではなく、AI Agent(AIエージェント)のオーケストレーションエンジンとして機能し、以下の3つのカテゴリーの外部AIサービスを連携させて作業を遂行します。

AI サービスタイプ 用途 推奨モデル
大規模言語モデル(LLM) キャラクター分析、脚本生成、絵コンテ用プロンプト GPT-4o、Claude 4 Sonnet など
画像生成モデル キャラクター造形、シーンの挿絵、絵コンテ画面 Nano Banana Pro
動画生成モデル 絵コンテ画面から動画クリップへの変換 Sora、豆包動画

🚀 クイックスタート:Toonflowに必要なLLM、画像生成、動画生成の3種類のAPIサービスは、すべて APIYI(apiyi.com) で一括取得可能です。複数のプラットフォームに個別に登録する必要はなく、わずか5分ですべての設定が完了します。

本記事では、Toonflowの主要機能の紹介、インストールとデプロイ、そしてAPIサービスの設定という3つの側面から、このAI短編ドラマ制作ツールの使い方を素早くマスターできるよう解説します。


Toonflow AI 短編ドラマツールの4大核心機能

Toonflow は、小説を短編ドラマに変換するプロセスを4つの自動化フェーズに分解しており、各フェーズは対応する AI サービスによって駆動されます。

機能一:AI キャラクターの自動抽出と生成

Toonflow は、大規模言語モデルを呼び出して入力された小説のテキストを深く分析し、キャラクター情報を自動的に識別・抽出します。

抽出次元 説明
外見の特徴 キャラクターの外見描写。キャラクターの立ち絵生成に使用 黒い長髪、青い瞳、白いロングドレス
性格の特徴 キャラクターの行動パターンや心理的特徴 冷静沈着、内向的で繊細
身分・背景 キャラクターの社会関係と物語内での役割 会社のCEO、ヒロインの親友
キャラクターカード 上記の情報を統合して生成された視覚的なキャラクターカード 立ち絵 + テキスト紹介を含む

キャラクター抽出の質は、その後の絵コンテ画面におけるキャラクターの一貫性を直接左右します。Toonflow は構造化されたプロンプトテンプレートを使用することで、LLM が出力するキャラクター描写をそのまま画像生成のプロンプトとして利用できるようにしています。

機能二:インテリジェントな脚本と絵コンテの生成

ユーザーがアダプテーション(翻案)したい章を選択すると、Toonflow は以下の処理を自動で行います。

  1. 小説の段落を構造化された脚本(セリフ、シーン描写、ト書きを含む)に変換
  2. 各シーンの絵コンテプロンプト(前景・中景・背景の構図、キャラクターの動き、小道具、カメラアングルを含む)を生成

このステップは完全に LLM によって実行され、生成された絵コンテプロンプトは直接画像生成モデルへと渡されます。

機能三:AI 画像生成と絵コンテの描画

Toonflow は絵コンテプロンプトを画像生成 API に送信し、各フレームの絵コンテ画面を自動生成します。現在サポートされている画像生成バックエンドは以下の通りです。

  • Nano Banana Pro:4K 解像度の出力をサポートし、キャラクターの一貫性が高く、多言語のテキストレンダリングにも対応しています。
  • 火山エンジン(Volcengine):ByteDance 傘下の画像生成サービス。

toonflow-ai-short-drama-comic-tool-api-guide-ja 图示

機能四:AI 動画合成とオンライン編集

最後のステップとして、Toonflow は絵コンテ画像を動画生成 API を通じて動的な動画クリップに変換します。また、オンライン編集機能を提供しており、ユーザーは生成された結果を個別に調整することが可能です。

サポートされている動画生成サービスには、Sora(OpenAI)や豆包(Doubao)動画生成 API などがあります。


Toonflowのインストールとデプロイ:ニーズに合わせた3つの方法

Toonflowは、Windowsデスクトップアプリ、Dockerデプロイ、手動デプロイの3種類のインストール方法を提供しています。

Toonflow システム要件

項目 最小要件
Node.js v23.11.1 以降
メモリ 2GB以上
OS Windows(デスクトップ版)/ Linux(サーバーデプロイ)
ネットワーク 外部AI APIサービスへのアクセスが必要

方法1:Windows デスクトップアプリ(初心者におすすめ)

GitHub ReleasesからElectronデスクトップインストールパッケージを直接ダウンロードします。

  • GitHubプロジェクトURL: github.com/HBAI-Ltd/Toonflow-app
  • デフォルトログインアカウント: admin
  • デフォルトログインパスワード: admin123

ダウンロードしてインストールするだけで実行可能です。デスクトップ版にはバックエンドサービスが内蔵されているため、追加の環境構築は不要です。

方法2:Docker デプロイ(サーバー推奨)

# プロジェクトをクローン
git clone https://github.com/HBAI-Ltd/Toonflow-app.git
cd Toonflow-app

# Docker Composeを使用してワンクリックで起動
docker-compose -f docker/docker-compose.yml up -d --build

起動後、http://localhost:60000 にアクセスして管理画面に入ります。

方法3:手動デプロイ(開発者向け)

# 依存関係のインストール
yarn install

# 開発モードで起動(バックエンドのみ、ポート 60000)
yarn dev

# デスクトップアプリ + バックエンドを同時に起動
yarn dev:gui

# 本番用ビルド
yarn build

手動デプロイの場合は、サービスの安定稼働のために PM2 などのプロセス管理ツールの使用を推奨します。


Toonflow APIサービス設定:3種類のAIインターフェース完全連携ガイド

Toonflowのインストール完了後、正常に使用するためには3種類のAIサービスのAPIインターフェースを設定する必要があります。これは設定プロセス全体の中で最も重要なステップです。

🎯 設定のアドバイス:統合APIサービスプロバイダーとして APIYI (apiyi.com) の使用を推奨します。このプラットフォームは、LLM、画像生成、動画生成の3種類のAPIを統一されたインターフェースで提供しており、同じ base_url と認証方式を使用できるため、Toonflowの設定作業を大幅に簡素化できます。

Toonflow API 設定パラメータ対応表 3種類のAIサービスで同じbase_urlを使用 ・ 統一インターフェースで一度の設定

LLM 大規模言語モデル

APIエンドポイント api.apiyi.com/v1

おすすめのモデル GPT-4o Claude 4 Sonnet DeepSeek V3 Gemini 2.5 Pro

用途 • キャラクター情報の自動抽出 • 構造化脚本生成 • 絵コンテプロンプトの作成 • 台詞とシーン描写

1エピソードあたりのコスト見積もり $0.5 – $2

OpenAI互換形式 v1.0.2+ モデル検出に対応

画像生成モデル

エンドポイントURL api.apiyi.com/v1

推奨モデル Nano Banana Pro 火山引擎

主要パラメータ • 解像度: 1K / 2K / 4K • 比率: 16:9 / 9:16 / 1:1 • モード: テキストから画像生成 / 画像から画像生成 • スタイル: アニメ / 写実 / 水彩

用途 • キャラクター立ち絵とキャラクターカード ・絵コンテ生成 • シーン背景イラスト

1話あたりのコスト見積もり $1 – $5

動画生成モデル

APIエンドポイント api.apiyi.com/v1

推奨モデル Sora 豆包動画

主要パラメータ • 長さ: 5-20秒/クリップ • 入力: 絵コンテ画像 + プロンプト • 解像度: 720p / 1080p • 形式: MP4 出力

用途 • 絵コンテ画面の動体化 • キャラクターの動作生成 • シーン切り替え効果

1話あたりのコスト見積もり $10 – $50

以上の3つのサービスはすべて APIYI apiyi.com の統合インターフェースから取得可能です ・ 同一の base_url と APIキー ・ 一度の設定で使用できます

設定1:大規模言語モデル(LLM)API 連携

Toonflowのキャラクター分析、脚本生成、絵コンテプロンプト生成機能はすべてLLMに依存しています。設定時にはOpenAI互換形式のAPIインターフェースを提供する必要があります。

推奨モデルの選択

モデル 適用シーン 特徴
GPT-4o 汎用シーン、高品質な脚本 理解力が高く、出力が安定
Claude 3.5 Sonnet 長編小説の分析 長いコンテキストに強い
DeepSeek V3 コストを抑えたい場合 コスパが非常に高い
Gemini 1.5 Pro マルチモーダル分析 画像とテキストの混合入力に対応

設定パラメータの例

Toonflowの設定ページで以下の情報を入力します:

インターフェースURL(base_url): https://api.apiyi.com/v1
APIキー: あなたの APIキー
モデル名: gpt-4o(またはその他の対応モデル)

💡 ヒント:設定完了後、Toonflow設定ページにある「モデルチェック」ボタンをクリックして、APIの疎通確認を行うことができます。この機能は v1.0.2 バージョンで追加されました。

設定2:Nano Banana Pro 画像生成 API 連携

Nano Banana Pro は Toonflow 推奨の画像生成モデルで、テキストから画像生成(text-to-image)と画像から画像生成(image-to-image)の両方のモードをサポートし、最大 4K 解像度の出力をサポートしています。

Nano Banana Pro の主要パラメータ

パラメータ 説明 推奨値
モデル名 API呼び出し時の model パラメータ nano-banana-pro
解像度 出力画像の解像度 2K(絵コンテ用)または 4K(表紙用)
画像比率 アスペクト比 16:9(横型ショートドラマ)または 9:16(縦型ショートドラマ)
スタイル制御 プロンプトによる画風制御 アニメ風、実写風、水彩風など

設定パラメータの例

インターフェースURL(base_url): https://api.apiyi.com/v1
APIキー: あなたの APIキー
画像モデル: nano-banana-pro

Nano Banana Pro は顔の一貫性に優れており、複数の絵コンテで同一のキャラクターイメージを維持する必要があるショートドラマ制作に特に適しています。

設定3:Sora / 豆包 (Doubao) 動画生成 API 連携

動画生成は Toonflow ワークフローの最終ステップです。絵コンテ画像を動的な動画クリップに変換します。

対応している動画生成サービス

サービス 特徴 1回あたりの生成時間
Sora(OpenAI) 画質が非常に良く、動きが自然 約 5〜20 秒
豆包 (Doubao) 動画 中国語シーンの最適化が良好 約 5〜15 秒

設定パラメータの例

インターフェースURL(base_url): https://api.apiyi.com/v1
APIキー: あなたの APIキー
動画モデル: sora(または対応する豆包モデル名)

💰 コストに関する注意:動画生成はプロセス全体の中で最もコストがかかる工程です。まず画像生成で絵コンテの効果を確認し、満足いく結果が得られてから動画を一括生成することをお勧めします。APIYI (apiyi.com) プラットフォーム経由で呼び出すことで、より柔軟な料金体系を利用でき、ショートドラマの制作コストを抑えることが可能です。


Toonflow 完全ワークフロー実践:小説からショートドラマ制作までの5ステップ

設定完了後、Toonflowを使用してAIショートドラマを制作する際の一連の流れは以下の通りです。

ステップ1:プロジェクトの作成と小説のインポート

Toonflowの管理画面で新規プロジェクトを作成し、小説のテキスト(TXT形式)をシステムにインポートします。章ごとの自動分割機能もサポートしています。

ステップ2:AIによるキャラクター抽出

「キャラクター生成」をクリックすると、システムが自動的に大規模言語モデル(LLM)を呼び出して全文を分析し、主要なキャラクター情報を抽出してキャラクターカードを作成します。後の画像生成のクオリティを最適化するために、キャラクターの説明を手動で調整することも可能です。

ステップ3:章の選択と脚本生成

制作したい章を選択し、「脚本生成」をクリックします。LLMが小説の段落を、セリフやシーン指示を含む構造化された脚本へと変換します。

ステップ4:絵コンテ画像の生成

システムが脚本に基づいて絵コンテ用のプロンプトを自動生成し、Nano Banana Proを呼び出して各フレームの画像を生成します。このステップでは、1フレームずつプレビューして調整することができます。

ステップ5:動画合成と編集

絵コンテの仕上がりを確認した後、Soraや豆包(Doubao)ビデオAPIを呼び出して、静止画を動画に変換します。Toonflowには最終調整用のオンラインエディタも用意されています。


Toonflowの技術アーキテクチャと開発情報

技術スタック 具体的な実装
バックエンドフレームワーク Node.js + Express + TypeScript
データベース SQLite3(better-sqlite3)
AI SDK Vercel AI SDK、Aigne ミドルウェア
画像処理 Sharp
デスクトップアプリ Electron
HTTP クライアント Axios
パラメータバリデーション Zod
プロセス管理 PM2(本番環境)
コンテナ化 Docker + Docker Compose

ToonflowプロジェクトはAGPL-3.0オープンソースライセンスを採用しており、個人および非商用利用は無料です。商用利用については、HBAI Ltdに連絡して商用ライセンスを取得する必要があります(連絡先メールアドレス: [email protected])。


Toonflow よくある質問 FAQ

Q1:Toonflowを利用するのにローカルGPUは必要ですか?

いいえ、必要ありません。Toonflow自体はオーケストレーションツールに過ぎず、すべてのAI推論タスクはリモートAPIを介して実行されます。お使いのPCはNode.jsとブラウザが動作する環境であれば十分です。APIYI(apiyi.com)を通じてAPIサービスに接続すれば、GPUリソースを気にする必要はありません。

Q2:Toonflowはどの画像生成モデルをサポートしていますか?

現在、主にNano Banana ProとVolcengine(火山引擎)の画像生成をサポートしています。中でもNano Banana Proは最大4K解像度に対応し、キャラクターの一貫性に優れているため、ショートドラマの絵コンテ作成に最適です。APIYI(apiyi.com)プラットフォームから直接Nano Banana Proモデルを呼び出すことができます。

Q3:ショートドラマ1話あたりのAPIコストはどのくらいですか?

コストはチャプターの長さや絵コンテの数によって異なります。一般的な目安は以下の通りです:

  • LLM呼び出し(キャラクター分析 + 脚本 + 絵コンテプロンプト):約$0.5-2
  • 画像生成(20-50枚の絵コンテ):約$1-5
  • 動画生成(20-50個のクリップ):約$10-50

動画生成が主なコスト要因となります。APIYI(apiyi.com)の柔軟な料金体系を利用して、支出を最適化することをお勧めします。

Q4:Toonflowのロードマップはありますか?

プロジェクトでは以下の機能を計画しています:

  • プロンプトブラッシュアップAgent(インテリジェントな動画プロンプト最適化)
  • マルチフォーマットテキスト対応(漫画脚本、ゲームの対話など)
  • キャラクターの衣装・小道具管理(長編での一貫性維持)
  • バッチ処理タスクキュー
  • ワンクリック・スタイル変換テンプレート

Toonflow AIショートドラマツール まとめ

Toonflowは、AIショートドラマ制作のための完全な自動化ソリューションを提供し、小説からショートドラマへのプロセスを手作業からAIパイプラインへと簡略化します。その核心的な価値は以下の通りです:

  1. 全プロセスの自動化:キャラクター抽出 → 脚本生成 → 絵コンテ作成 → 動画合成まで、ワンストップで完了します。
  2. オープンソースで無料:AGPL-3.0ライセンスにより、個人利用は無料です。
  3. 柔軟なAIバックエンド:特定のプロバイダーに縛られることなく、多様な大規模言語モデル、画像・動画生成モデルをサポートしています。
  4. 多様なデプロイ方法:デスクトップアプリ、Docker、手動デプロイなど、さまざまな利用シーンに対応しています。

Toonflowに必要なすべてのAI APIサービスを、APIYI(apiyi.com)で一括取得することをお勧めします。インターフェースと課金を一本化し、迅速な設定で創作を開始しましょう。


参考資料

  1. Toonflow GitHub リポジトリ: 公式オープンソースプロジェクト

    • リンク: github.com/HBAI-Ltd/Toonflow-app
    • 説明: ソースコード、インストールガイド、リリース情報が含まれています
  2. Toonflow Gitee ミラー: 中国国内からのアクセス高速化

    • リンク: gitee.com/HBAI-Ltd/Toonflow-app
    • 説明: 中国国内のネットワーク環境に適しています
  3. APIYI 公式ドキュメント: AI API サービス導入ガイド

    • リンク: help.apiyi.com
    • 説明: LLM、画像生成、動画生成 API の利用チュートリアル

この記事は APIYI 技術チームによって執筆されました。AI 大規模言語モデルの活用と開発の実践に焦点を当てています。さらなる技術チュートリアルについては、APIYI(apiyi.com)をご覧ください。

類似投稿