Toonflow是什么
Toonflow 是开源的一站式 AI 短剧创作工具，将小说、剧本通过多 Agent 协作自动转化为结构化剧本、智能分镜、角色视觉和动画视频，实现小说→剧本→分镜→视频，全流程 AI 自动化生产。工具支持 Windows、macOS、Linux 跨平台桌面端部署，数据完全本地存储，助力创作者低成本批量产出视觉内容。
Toonflow的主要功能
-
AI 编剧：多 Agent 协作将小说/创意自动拆解为场景、台词、节奏，输出标准剧本格式。
-
智能分镜：自动生成精准分镜脚本，包含景别、构图、光线方向、镜头运动完整描述。
-
角色一致性保持：建立角色外貌数据库，跨场景、跨镜头保持人物外貌与服装道具高度一致。
-
AI 批量出图：深度集成 Nano Banana、GPT Image 2、可灵、即梦、海螺等主流图像模型，支持批量生成。
-
视频合成输出：自动完成配音、字幕、剪辑，成片可直接发布，支持竖屏 9:16 和横屏 16:9 双格式。
-
无限画布工作台：用类无限画布形式自由编排剧本、角色、分镜、素材与视频节点，支持并行生产。
-
三层 Agent 协作体系：决策层、执行层、监督层协同，覆盖任务拆解、内容生成、质量审阅与修订反馈。
-
持久化 Agent 记忆：基于本地 ONNX 向量检索的跨会话记忆系统，支持语义召回，确保多轮创作连续性。
-
可编程供应商系统：支持在设置中心直接编写 TypeScript 供应商逻辑并即时生效，无需改源码或重启。
-
章节事件图谱驱动改编：自动提取原著章节事件并结构化存储，剧本改编按事件图谱精准调用上下文。
Toonflow的技术原理
- 多 Agent 协作架构：Toonflow 采用三层 Agent 协作体系，分为决策层、执行层与监督层。导演 Agent 统筹全局叙事节奏与任务优先级，编剧 Agent 负责将小说转化为标准剧本并优化戏剧冲突，分镜 Agent 生成包含景别、构图、光线与镜头运动的精准分镜描述，一致性 Agent 建立角色外貌数据库以跨场景保持人物特征稳定，质检 Agent 自动审查情节逻辑漏洞与角色矛盾，配音 Agent 匹配角色声线并生成多角色语音合成脚本。各 Agent 基于 Vercel AI SDK 并行协作，通过 Socket.IO 实时通信，模拟真实影视制作团队的分工模式。
- 持久化记忆与上下文保持：系统内置基于本地 ONNX 向量检索的跨会话记忆系统，用 @huggingface/transformers 进行本地嵌入推理。该记忆系统支持短期消息缓存、长期摘要压缩与语义召回，确保多轮创作中角色设定、剧情走向与风格偏好不会丢失，实现跨章节的连续叙事。
- 章节事件图谱驱动改编：针对长篇小说改编中的信息丢失问题，Toonflow 自动提取原著章节级事件并构建结构化事件图谱。剧本改编时，系统按事件图谱精准调用相关上下文片段，而非一次性投喂全文，从而在控制 Token 消耗的同时，保持改编剧本与原著情节的高度 fidelity。
如何使用Toonflow
- 下载安装：前往 GitHub Releases 页面下载对应系统的安装包，安装后启动应用。
- 配置模型：在设置中心配置文本、图像、视频模型供应商 API。
- 创建项目：登录默认账号（admin / admin123），新建项目并导入小说原著或创意文本。
- 提取事件：执行章节事件提取，自动构建原著事件图谱，为后续改编提供精准上下文。
- AI 编剧：进入 ScriptAgent，生成故事骨架、改编策略与结构化剧本，支持多轮迭代优化。
- 分镜制作：切换到 ProductionAgent，在无限画布中组织分镜节点，批量生成角色与场景素材图。
- 视频生成：对分镜图进行节点化精调，生成视频片段，自动完成配音、字幕与剪辑，导出成片。
Toonflow的核心优势
-
全流程自动化：从文本到成片一站式完成，无需切换多个工具，创作效率提升 10 倍+。
-
多 Agent 协作：导演、编剧、分镜、一致性、质检、配音等 Agent 并行协作，输出质量大幅超越单一 LLM 直出。
-
角色锚定系统：解决 AI 短剧最核心的”角色变脸”难题，跨场景保持人物外貌高度一致。
-
模型无关架构：不绑定任何单一平台，支持自由接入主流图像/视频模型，也支持本地部署模型。
-
数据完全本地：所有数据存储在本地，不经任何第三方服务器，保障隐私安全。
-
批量工厂效率：支持整部小说批量转换，自动规划节奏密度，一人可跑完整生产线。
Toonflow的同类竞品对比
| 对比维度 | Toonflow | Descript |
|---|---|---|
| 产品定位 | 开源 AI 短剧全链路工业化生产系统 | 音视频编辑与内容创作平台 |
| 核心工作流 | 小说/创意 → 剧本 → 分镜 → 角色 → 视频 | 录音/脚本 → 剪辑 → 字幕 → 发布 |
| 目标用户 | AI 短剧创作者、MCN、网文改编团队、影视团队 | 播客主、YouTuber、营销人员、培训师 |
| AI 编剧能力 | ✅ 多 Agent 协作，自动拆解场景/台词/节奏，支持章节事件图谱驱动改编 | ❌ 无原生剧本创作功能 |
| 角色一致性 | ✅ 角色锚定系统，跨场景保持人物外貌/服装/道具高度一致 | ❌ 无角色管理或视觉一致性控制 |
| 智能分镜 | ✅ 自动生成含景别、构图、光线、镜头运动的专业分镜脚本 | ❌ 无分镜功能，仅有简单图文排列 |
| AI 视频生成 | ✅ 对接可灵、Seedance、Nano Banana 等模型，从文本直接生成视频素材 | ⚠️ 仅支持简单 AI 背景生成，不直接生成 AI 视频画面 |
| 音频 AI 能力 | ⚠️ 配音 Agent + TTS 多角色语音合成 | ✅ 极强：Studio Sound 降噪、Overdub 语音克隆、自动转录 |
| 编辑交互范式 | 节点化无限画布 + 结构化剧本编辑 | 文本驱动编辑（像编辑 Word 一样编辑音视频） |
| 开源协议 | Apache-2.0（完全开源） | ❌ 闭源商业软件 |
| 部署方式 | 本地桌面端 + Docker 自部署 + 云端 | 纯云端 SaaS |
Toonflow的应用场景
-
短视频内容创作：快速生成抖音、快手、B站、YouTube 等平台适配的 AI 短剧。
-
小说影视化实验：将网络小说自动改编为可视化短剧，验证 IP 改编潜力。
-
AI 文学改编工具：为文学创作者提供从文字到视频的自动化改编能力。
-
剧本开发与快速原型：影视团队快速生成剧本原型与分镜预览，降低前期试错成本。
-
视频素材生成：批量生成角色设定图、场景概念图、视频片段等创作素材。
