一、项目介绍

随着 AIGC 技术快速发展,短剧、漫画、动画内容生产正在进入智能化时代。

传统漫剧制作流程通常需要:

  • 编剧创作剧本
  • 分镜师拆解镜头
  • 美术设计角色和场景
  • 视频剪辑制作
  • 配音、字幕处理

整个流程周期长、成本高。

本项目打造了一套 AI智能剧情生产工作流系统,通过大语言模型和 AI 视频生成能力,实现:

输入一本小说 / 一段剧本,自动生成完整 AI 漫剧短视频。

系统采用:

  • 后端:Java
  • 前端:Vue
  • AI模型:支持多种视频生成模型
  • 架构:前后端分离
  • 开源部署方式

帮助开发者快速搭建属于自己的 AI 漫剧生产平台。

 

 

 

二、系统功能展示

1. AI剧情工作流

系统采用类似影视工业化生产流程设计:

小说/剧本输入

        ↓

AI剧情分析

        ↓

自动生成分集剧本

        ↓

场景角色道具提取

        ↓

AI生成分镜

        ↓

AI视频生成

        ↓

自动合成短剧

整个流程无需人工逐镜头制作。

 

 

 

三、核心功能模块

1. 全局设置模块

用于配置整个 AI 漫剧项目。

支持:

  • 剧集名称
  • 视频风格
  • AI模型选择
  • 输出参数
  • 视频比例

例如:

创建:

疯狂动物城3-分裂的基因组

作为一个 AI 漫剧项目。

 

 

 

2. AI小说转剧本模块

用户上传小说内容后:

AI自动完成:

  • 故事情节理解
  • 人物关系分析
  • 场景拆分
  • 镜头规划

生成类似:

【分镜1】

 

场景:

陈塘关城楼

 

角色:

李靖、哪吒

 

动作:

李靖持剑而立,

哪吒怒视前方

 

镜头:

中景

50mm镜头

冷色调

顺光

将文字小说转换为影视化脚本。

 

 

 

3. 场景、角色、道具资产库

系统提供 AI 素材管理能力。

资产分类:

  • 场景库
  • 角色库
  • 道具库
  • 文件库
  • 其他

例如:

场景库

保存:

  • 古代城池
  • 森林
  • 房屋
  • 城市街道

角色库

保存:

  • 主角形象
  • 配角形象
  • 动物角色

道具库

保存:

  • 武器
  • 服饰
  • 道具模型

实现角色和场景复用。

 

 

4. AI自动分镜系统

这是系统核心功能。

AI根据剧本自动生成:

  • 镜头时间
  • 台词
  • BGM
  • 动作
  • 构图
  • 景别
  • 光线
  • 运镜

例如:

时间轴:

00:00-00:05

 

 

动作:

 

角色奔跑,

镜头跟随移动

 

 

构图:

 

三分法

 

 

景别:

 

中景

 

 

拍摄角度:

 

平视

 

 

焦距:

 

50mm

达到影视分镜导演效果。

 

 

5. AI视频生成

系统支持选择视频模型:

截图中显示:

视频模型:

Seedance 1.5 Pro

同时支持:

  • AI生成视频
  • 上传视频
  • Seed控制
  • 分镜生成

每个分镜可以独立生成视频片段。

 

 

 

6. 一键生成完整短剧

系统最终输出:

  • AI动画视频
  • 漫剧短片
  • 连续剧情视频

生成流程:

分镜1

 ↓

AI视频

 

分镜2

 ↓

AI视频

 

分镜3

 ↓

AI视频

 

自动拼接

 

 ↓

 

完整漫剧

最终生成类似:

  • 抖音短剧
  • 快手漫剧
  • 小红书故事视频
  • YouTube Shorts

 

 

四、系统技术架构

前端

采用:

Vue3

+

TypeScript

+

Element Plus

+

Vite

负责:

  • 工作流界面
  • 剧本编辑
  • 分镜管理
  • 视频预览

 

 

后端

采用:

Java

Spring Boot

MyBatis Plus

MySQL

Redis

主要负责:

  • 用户管理
  • 项目管理
  • 剧本解析
  • AI任务调度
  • 文件管理

 

 

五、AI能力集成

系统可以接入:

大语言模型

用于:

  • 小说分析
  • 剧本生成
  • 分镜生成
  • 角色设计

例如:

GPT

Claude

通义千问

DeepSeek

 

 

图像生成模型

用于:

  • 角色设计
  • 场景生成
  • 分镜图生成

支持:

  • Stable Diffusion
  • Midjourney
  • DALL-E

 

 

视频生成模型

截图展示:

Seedance 1.5 Pro

可扩展:

  • 可灵
  • Runway
  • Pika
  • Sora类模型

 

 

六、系统业务流程

完整流程:

用户上传小说

 

      ↓

 

AI读取文本

 

      ↓

 

生成故事摘要

 

      ↓

 

生成剧本

 

      ↓

 

创建角色

 

      ↓

 

生成场景

 

      ↓

 

自动拆分镜头

 

      ↓

 

AI生成视频

 

      ↓

 

视频合成

 

      ↓

 

导出作品

 

 

七、项目特点

1. 降低漫剧制作成本

传统:

编剧

+

画师

+

动画师

+

剪辑师

现在:

一个人

+

AI系统

即可完成。

 

 

2. 工业化内容生产

支持:

  • 批量小说转换
  • 批量生成短剧
  • 自动化生产

适合:

  • MCN机构
  • 短视频团队
  • 内容创业者

 

 

3. 全流程自动化

不是简单 AI 文生图,而是一套:

剧本 → 分镜 → 视频 → 成片

完整生产流水线。

 

 

八、项目部署

推荐环境:

JDK 17+

 

Node.js 18+

 

MySQL 8

 

Redis 7

 

Linux服务器

启动:

后端:

java -jar ai-drama.jar

前端:

npm install

 

npm run build

部署完成即可使用。

 

 

九、未来扩展方向

可以继续增加:

AI配音

自动生成:

  • 男女声
  • 情绪语音
  • 多角色对白

AI字幕

自动:

  • 识别对白
  • 添加字幕

AI音乐

生成:

  • BGM
  • 氛围音乐

多语言漫剧

支持:

  • 中文
  • 英文
  • 日语

 

 

十、总结

这是一套基于 Java + Vue + AIGC模型 构建的全流程 AI 漫剧生产系统。

它将传统影视制作流程数字化:

小说输入 → AI剧本 → AI分镜 → AI画面 → AI视频 → 自动成片

未来随着视频生成模型不断升级,AI短剧、AI动画、AI影视制作将成为内容生产的重要方向。

 

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐