全开源 AI 漫剧短剧自动生成系统:Java + Vue 架构,实现小说一键生成 AI 视频
一、项目介绍
随着 AIGC 技术快速发展,短剧、漫画、动画内容生产正在进入智能化时代。
传统漫剧制作流程通常需要:
- 编剧创作剧本
- 分镜师拆解镜头
- 美术设计角色和场景
- 视频剪辑制作
- 配音、字幕处理
整个流程周期长、成本高。
本项目打造了一套 AI智能剧情生产工作流系统,通过大语言模型和 AI 视频生成能力,实现:
输入一本小说 / 一段剧本,自动生成完整 AI 漫剧短视频。
系统采用:
- 后端:Java
- 前端:Vue
- AI模型:支持多种视频生成模型
- 架构:前后端分离
- 开源部署方式
帮助开发者快速搭建属于自己的 AI 漫剧生产平台。
⸻

二、系统功能展示
1. AI剧情工作流
系统采用类似影视工业化生产流程设计:
小说/剧本输入
↓
AI剧情分析
↓
自动生成分集剧本
↓
场景角色道具提取
↓
AI生成分镜
↓
AI视频生成
↓
自动合成短剧
整个流程无需人工逐镜头制作。
⸻
三、核心功能模块
1. 全局设置模块
用于配置整个 AI 漫剧项目。
支持:
- 剧集名称
- 视频风格
- AI模型选择
- 输出参数
- 视频比例
例如:
创建:
疯狂动物城3-分裂的基因组
作为一个 AI 漫剧项目。
⸻
2. AI小说转剧本模块
用户上传小说内容后:
AI自动完成:
- 故事情节理解
- 人物关系分析
- 场景拆分
- 镜头规划
生成类似:
【分镜1】
场景:
陈塘关城楼
角色:
李靖、哪吒
动作:
李靖持剑而立,
哪吒怒视前方
镜头:
中景
50mm镜头
冷色调
顺光
将文字小说转换为影视化脚本。
⸻
3. 场景、角色、道具资产库
系统提供 AI 素材管理能力。
资产分类:
- 场景库
- 角色库
- 道具库
- 文件库
- 其他
例如:
场景库
保存:
- 古代城池
- 森林
- 房屋
- 城市街道
角色库
保存:
- 主角形象
- 配角形象
- 动物角色
道具库
保存:
- 武器
- 服饰
- 道具模型
实现角色和场景复用。
⸻

4. AI自动分镜系统
这是系统核心功能。
AI根据剧本自动生成:
- 镜头时间
- 台词
- BGM
- 动作
- 构图
- 景别
- 光线
- 运镜
例如:
时间轴:
00:00-00:05
动作:
角色奔跑,
镜头跟随移动
构图:
三分法
景别:
中景
拍摄角度:
平视
焦距:
50mm
达到影视分镜导演效果。
⸻
5. AI视频生成
系统支持选择视频模型:
截图中显示:
视频模型:
Seedance 1.5 Pro
同时支持:
- AI生成视频
- 上传视频
- Seed控制
- 分镜生成
每个分镜可以独立生成视频片段。
⸻
6. 一键生成完整短剧
系统最终输出:
- AI动画视频
- 漫剧短片
- 连续剧情视频
生成流程:
分镜1
↓
AI视频
分镜2
↓
AI视频
分镜3
↓
AI视频
自动拼接
↓
完整漫剧
最终生成类似:
- 抖音短剧
- 快手漫剧
- 小红书故事视频
- YouTube Shorts
⸻
四、系统技术架构
前端
采用:
Vue3
+
TypeScript
+
Element Plus
+
Vite
负责:
- 工作流界面
- 剧本编辑
- 分镜管理
- 视频预览
⸻
后端
采用:
Java
Spring Boot
MyBatis Plus
MySQL
Redis
主要负责:
- 用户管理
- 项目管理
- 剧本解析
- AI任务调度
- 文件管理
⸻
五、AI能力集成
系统可以接入:
大语言模型
用于:
- 小说分析
- 剧本生成
- 分镜生成
- 角色设计
例如:
GPT
Claude
通义千问
DeepSeek
⸻
图像生成模型
用于:
- 角色设计
- 场景生成
- 分镜图生成
支持:
- Stable Diffusion
- Midjourney
- DALL-E
⸻
视频生成模型
截图展示:
Seedance 1.5 Pro
可扩展:
- 可灵
- Runway
- Pika
- Sora类模型
⸻
六、系统业务流程
完整流程:
用户上传小说
↓
AI读取文本
↓
生成故事摘要
↓
生成剧本
↓
创建角色
↓
生成场景
↓
自动拆分镜头
↓
AI生成视频
↓
视频合成
↓
导出作品
⸻
七、项目特点
1. 降低漫剧制作成本
传统:
编剧
+
画师
+
动画师
+
剪辑师
现在:
一个人
+
AI系统
即可完成。
⸻
2. 工业化内容生产
支持:
- 批量小说转换
- 批量生成短剧
- 自动化生产
适合:
- MCN机构
- 短视频团队
- 内容创业者
⸻
3. 全流程自动化
不是简单 AI 文生图,而是一套:
剧本 → 分镜 → 视频 → 成片
完整生产流水线。
⸻
八、项目部署
推荐环境:
JDK 17+
Node.js 18+
MySQL 8
Redis 7
Linux服务器
启动:
后端:
java -jar ai-drama.jar
前端:
npm install
npm run build
部署完成即可使用。
⸻
九、未来扩展方向
可以继续增加:
AI配音
自动生成:
- 男女声
- 情绪语音
- 多角色对白
AI字幕
自动:
- 识别对白
- 添加字幕
AI音乐
生成:
- BGM
- 氛围音乐
多语言漫剧
支持:
- 中文
- 英文
- 日语
⸻
十、总结
这是一套基于 Java + Vue + AIGC模型 构建的全流程 AI 漫剧生产系统。
它将传统影视制作流程数字化:
小说输入 → AI剧本 → AI分镜 → AI画面 → AI视频 → 自动成片
未来随着视频生成模型不断升级,AI短剧、AI动画、AI影视制作将成为内容生产的重要方向。
DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。
更多推荐


所有评论(0)