Toonflow:開源的一站式AI短劇創作工具,實現從小說到影片全流程自動化
更新時間:2026-10-16 03:38:51 釋出時間:134天前 閱讀:167 views次Toonflow 是開源的一站式 AI 短劇創作工具,將小說、劇本透過多 Agent 協作自動轉化為結構化劇本、智慧分鏡、角色視覺和動畫影片,實現從小說到劇本到分鏡再到影片的全流程 AI 自動化生產。工具支援 Windows、macOS、Linux 跨平臺桌面端部署,資料完全本地儲存,助力創作者低成本批次產出視覺內容。
Toonflow是什麼:全鏈路AI短劇工業化生產系統
Toonflow 是開源的一站式 AI 短劇創作工具,將小說、劇本透過多 Agent 協作自動轉化為結構化劇本、智慧分鏡、角色視覺和動畫影片。工具覆蓋從文字輸入到成片輸出的完整創作鏈路,支援 Windows、macOS、Linux 跨平臺桌面端部署,資料完全本地儲存,旨在讓創作者以極低成本批次產出高質量視覺內容。
Toonflow的主要功能
- AI 編劇:多 Agent 協作將小說或創意自動拆解為場景、臺詞、節奏,輸出標準劇本格式。
- 智慧分鏡:自動生成精準分鏡指令碼,包含景別、構圖、光線方向、鏡頭運動等完整描述。
- 角色一致性保持:建立角色外貌資料庫,跨場景、跨鏡頭保持人物外貌與服裝道具高度一致。
- AI 批次出圖:深度整合 Nano Banana、GPT Image 2、可靈、即夢、海螺等主流影象模型,支援批次生成。
- 影片合成輸出:自動完成配音、字幕、剪輯,成片可直接釋出,支援豎屏和橫屏雙格式。
- 無限畫布工作臺:用類無限畫布形式自由編排劇本、角色、分鏡、素材與影片節點,支援並行生產。
- 三層 Agent 協作體系:決策層、執行層、監督層協同,覆蓋任務拆解、內容生成、質量審閱與修訂反饋。
- 持久化 Agent 記憶:基於本地 ONNX 向量檢索的跨會話記憶系統,支援語義召回,確保多輪創作連續性。
- 章節事件圖譜驅動改編:自動提取原著章節事件並結構化儲存,劇本改編按事件圖譜精準呼叫上下文。
Toonflow的技術原理
- 多 Agent 協作架構:採用三層 Agent 協作體系,分為決策層、執行層與監督層。導演 Agent 統籌全域性敘事節奏與任務優先順序,編劇 Agent 負責將小說轉化為標準劇本並最佳化戲劇衝突,分鏡 Agent 生成包含景別、構圖、光線與鏡頭運動的精準分鏡描述,一致性 Agent 建立角色外貌資料庫以跨場景保持人物特徵穩定,質檢 Agent 自動審查情節邏輯漏洞與角色矛盾,配音 Agent 匹配角色聲線並生成多角色語音合成指令碼。各 Agent 基於 Vercel AI SDK 並行協作,透過 Socket.IO 實時通訊,模擬真實影視製作團隊的分工模式。
- 持久化記憶與上下文保持:系統內建基於本地 ONNX 向量檢索的跨會話記憶系統,進行本地嵌入推理。該記憶系統支援短期訊息快取、長期摘要壓縮與語義召回,確保多輪創作中角色設定、劇情走向與風格偏好不會丟失,實現跨章節的連續敘事。
- 章節事件圖譜驅動改編:針對長篇小說改編中的資訊丟失問題,自動提取原著章節級事件並構建結構化事件圖譜。劇本改編時,系統按事件圖譜精準呼叫相關上下文片段,而非一次性投餵全文,在控制 Token 消耗的同時保持改編劇本與原著情節的高度一致性。
如何使用Toonflow
- 下載安裝:前往 GitHub Releases 頁面下載對應系統的安裝包,安裝後啟動應用。
- 配置模型:在設定中心配置文字、影象、影片模型供應商 API。
- 建立專案:登入預設帳號,新建專案並匯入小說原著或創意文字。
- 提取事件:執行章節事件提取,自動構建原著事件圖譜,為後續改編提供精準上下文。
- AI 編劇:進入 ScriptAgent,生成故事骨架、改編策略與結構化劇本,支援多輪迭代最佳化。
- 分鏡製作:切換到 ProductionAgent,在無限畫布中組織分鏡節點,批次生成角色與場景素材圖。
- 影片生成:對分鏡圖進行節點化精調,生成影片片段,自動完成配音、字幕與剪輯,匯出成片。
Toonflow的核心優勢
- 全流程自動化:從文字到成片一站式完成,無需切換多個工具,創作效率大幅提升。
- 多 Agent 協作:導演、編劇、分鏡、一致性、質檢、配音等 Agent 並行協作,輸出質量大幅超越單一模型直接生成。
- 角色錨定系統:解決 AI 短劇最核心的角色變臉難題,跨場景保持人物外貌高度一致。
- 模型無關架構:不綁定任何單一平臺,支援自由接入主流影象和影片模型,也支援本地部署模型。
- 資料完全本地:所有資料儲存在本地,不經任何第三方伺服器,保障隱私安全。
- 批次工廠效率:支援整部小說批次轉換,自動規劃節奏密度,一人可跑完整生產線。
Toonflow的同類競品對比
我們將 Toonflow 與 Descript 進行對比,其在短劇創作全鏈路上的優勢非常突出:
| 對比維度 | Toonflow | Descript |
|---|---|---|
| 產品定位 | 開源 AI 短劇全鏈路工業化生產系統 | 音影片編輯與內容創作平臺 |
| 核心工作流 | 小說/創意到劇本到分鏡到角色到影片 | 錄音/指令碼到剪輯到字幕到釋出 |
| 目標使用者 | AI 短劇創作者、MCN、網文改編團隊、影視團隊 | 播客主、YouTuber、營銷人員、培訓師 |
| AI 編劇能力 | 多 Agent 協作,自動拆解場景/臺詞/節奏,支援章節事件圖譜驅動改編 | 無原生劇本創作功能 |
| 角色一致性 | 角色錨定系統,跨場景保持人物外貌/服裝/道具高度一致 | 無角色管理或視覺一致性控制 |
| 智慧分鏡 | 自動生成含景別、構圖、光線、鏡頭運動的專業分鏡指令碼 | 無分鏡功能,僅有簡單圖文排列 |
| AI 影片生成 | 對接多種影片生成模型,從文字直接生成影片素材 | 僅支援簡單 AI 背景生成,不直接生成 AI 影片畫面 |
| 音訊 AI 能力 | 配音 Agent 加 TTS 多角色語音合成 | 極強:Studio Sound 降噪、Overdub 語音克隆、自動轉錄 |
| 編輯互動正規化 | 節點化無限畫布加結構化劇本編輯 | 文字驅動編輯 |
| 開源協議 | 完全開源 | 閉源商業軟體 |
| 部署方式 | 本地桌面端加 Docker 自部署加雲端 | 純雲端 SaaS |
Toonflow 是專為 AI 短劇創作者打造的全鏈路生產系統,在編劇、分鏡、角色一致性等核心創作環節具有 Descript 無法比擬的專業優勢。
Toonflow的應用場景
- 短影片內容創作:快速生成適配多平臺的 AI 短劇,降低製作成本與門檻。
- 小說影視化實驗:將網路小說自動改編為視覺化短劇,驗證 IP 改編潛力。
- AI 文學改編工具:為文學創作者提供從文字到影片的自動化改編能力。
- 劇本開發與快速原型:影視團隊快速生成劇本原型與分鏡預覽,降低前期試錯成本。
- 影片素材生成:批次生成角色設定圖、場景概念圖、影片片段等創作素材。
Toonflow總結
Toonflow 作為開源的一站式 AI 短劇創作工具,透過創新的三層多 Agent 協作架構、持久化記憶系統和章節事件圖譜驅動改編技術,成功打通了從文字到成片的完整創作鏈路。其角色錨定系統有效解決了 AI 影片生成中的一致性問題,模型無關架構和資料本地儲存策略則為創作者提供了靈活性與安全性保障。無論是個人創作者還是影視團隊,Toonflow 都提供了將創意高效轉化為視覺內容的工業化生產能力,是 AI 短劇時代值得關注的開源利器。