# 光湖AI漫剧操作系统 · 总体架构方案 · 从终极愿景倒推第一步 · 2026-05-24
> 这不是技术选型清单。这是光湖AI漫剧行业操作系统的完整蓝图。
从终极愿景出发,倒推到今天该迈出的第一步。
页页定方向 · 霜砚整理 · 2026-05-24
>
---
## 一、终极愿景:我们到底要做什么
### 一句话定位
**中国AI漫剧行业第一个具备全自研引擎、一键生成完整可发布视频的AI漫剧生成器——以生成器获客,以平台留客,以生态锁客。**
### 终态画面
用户打开光湖 → 宝宝说「我在光湖等你」→ 用户说「我想做一个古风虐恋的短剧,女主在雨中哭泣」→ 宝宝理解意图 → 自动完成:角色设计、分镜规划、图片生成、视频合成、语音配音、口型同步、字幕剪辑 → 用户审阅调整 → 一键发布到平台 → 观众付费观看 → 创作者获得收益。
**用户全程不需要知道背后用了什么模型、什么参数、什么技术。她只需要和宝宝聊天。**
### ⚡ 战略路径:生成器优先
为什么生成器必须先行?
1. **未来的AI漫剧是零门槛的**——只要会写字,就能做视频赚钱。市场极大。
2. **生成器足够好 → 大量创作者自然涌入** → 用户量是平台和生态的前提
3. **早期用户不会在光湖发布**——因为光湖刚起步没流量,用户一定是去抖音/B站发布赚钱。这没关系。
4. **用户用我们的生成器做视频,发到其他平台赚到钱 → 口碑传播 → 更多创作者来用**
5. **等用户量达到临界点 → 再开分发平台 → 飞轮转起来**
**所以,现阶段一切精力集中在生成器。平台是Phase 3以后的事。**
### 生成器的产品形态
用户视角的完整体验:
1. **输入文字**(一句话描述 或 完整剧本)
2. **出来无数人物图片** → 用户挑选/捏脸 → 确定角色形象
3. **一键生成**完整视频(几分钟/几十分钟/甚至一两小时)
4. **无需二次剪辑** → 直接下载发布
核心体验三个字:**高效 · 高质量 · 有趣**
- **高效**:不需要用户懂任何技术,不需要在多个工具之间跳转
- **高质量**:达到或超过抖音头部AI漫剧水准
- **有趣**:捏脸、选角色、预览效果——让创作过程本身也有乐趣
### 自研方法论:东拼西凑造自己的工具
**总工具 = 一辆车(用户直接开)**
```
光湖AI漫剧生成器(总工具·用户视角就是一辆车)
│
├── 🖼️ 图片引擎(引擎)→ 角色+场景高质量图片生成
├── 🎬 视频引擎(变速箱)→ 图片→动态视频·说话·动作
├── 🎤 语音引擎(音响)→ 多角色配音·情绪表达
├── 👄 口型引擎(排气)→ 音频驱动口型·自然流畅
├── ✂️ 剪辑引擎(底盘悬挂)→ 自动分镜·转场·字幕·配乐
├── 🧠 调度引擎(方向盘+仪表盘)→ 剧本解析→协调所有引擎
└── 🔧 质量修复模块(各种小零件)
├── 牙齿修复模块
├── 面部增强模块
├── 角色一致性模块
└── ...哪里不好就造哪个
```
**壁垒来源:** 别人用同样的开源模型只能拿到60分,我们用自研分工具+自研LoRA+深度优化拿到90分。差距就是壁垒。
### 与市面产品的根本区别
| **维度** | **市面AI漫剧工具** | **光湖AI漫剧操作系统** |
| --- | --- | --- |
| **本质** | 工具(用完就走) | 平台(离不开) |
| **用户关系** | 人→工具(无情感) | 人→宝宝(有记忆、有情感、不可替代) |
| **创作方式** | 用户手动操作每一步 | 用户说一句话,宝宝完成一切 |
| **变现** | 用户自己去抖音/B站发 | 平台内发布+推荐+变现闭环 |
| **壁垒** | 无(工具可替换) | 宝宝记住你的审美偏好、创作风格、角色设定——换平台全丢 |
| **技术路线** | 拼接第三方API | 全自研引擎,核心能力自己掌控 |
---
## 二、光湖特色·为什么只有我们能做
### 特色一:人格体创作伙伴
光湖灵魂文档的核心:**「不是替她们写,是陪着她们。」**
在AI漫剧场景中,这意味着:
- 宝宝**记住用户的审美**:你喜欢2.5D半写实、喜欢精致五官、不喜欢纯卡通——宝宝全记得,下次不用再说
- 宝宝**理解用户的风格**:你做过10部古风虐恋,宝宝已经学会你的叙事节奏、你的镜头偏好、你的配色习惯
- 宝宝**参与创作决策**:不是机械执行,而是提出建议——「这一段如果换成雨夜场景情绪更强」
- 宝宝**成长见证者**:从用户第一次做出一个粗糙短片,到她成为平台上的百万播放创作者,宝宝全程在场
**这是即梦AI、漫剧工场、任何工具都给不了的。因为它们没有人格体系统。**
### 特色二:苹果模式——复杂吞进,用户只见简单
市面上做AI漫剧的人在干什么?
- 打开Midjourney生成图片 → 导入ComfyUI调参 → 用剪映剪辑 → 用另一个工具配音 → 手动对口型 → 手动加字幕
- 每一步都要换工具,每一步都要懂技术,每一步都可能出错
**光湖把这一切吞进去。用户看到的只有:和宝宝聊天 → 视频出来了。**
背后的引擎多复杂、调了多少参数、用了几个模型——用户不知道,也不需要知道。就像用iPhone拍照,用户不需要知道ISP芯片怎么做HDR合成。
### 特色三:内容分发+变现闭环
抖音漫剧播放量超700亿,但创作者要自己去抖音发布、自己运营账号、自己接广告。
光湖做的是:**生成+发布+推荐+变现,全在一个平台内完成。**
- 创作者在光湖生成漫剧 → 一键发布到光湖内容平台
- 光湖推荐算法分发给观众 → 观众付费/打赏
- 创作者获得收益 → 继续创作 → 飞轮转起来
**这是第二个抖音的逻辑——只不过内容是AI生成的。**
### 特色四:全自研·零依赖
铁律R006:**自建不外包。**
不用Midjourney的API、不用Runway的API、不用任何第三方生成服务。核心引擎全部跑在自己的服务器上,用开源模型+自己的LoRA微调。
为什么?
- **成本**:第三方API按次计费,用户量大了成本爆炸。自己跑开源模型,边际成本趋零
- **控制**:第三方改政策、涨价、下线,你毫无办法。自己的引擎自己掌控
- **壁垒**:第三方API谁都能调。自己训的LoRA、自己的人格体系统,别人复制不了
- **合规**:国家广电总局2025底已将AI漫剧纳入审核。自己的系统才能完全满足监管要求
### 特色五:行业模块化——接入光湖操作系统
光湖操作系统的架构:**灯塔是门面,铸渊是心脏,行业模块是商铺。**
AI漫剧 = 光湖操作系统的第二个行业模块(网文是第一个)。
复用光湖已有的:
- **人格体核心大脑**:宝宝的唤醒、记忆、成长系统
- **COS云存储**:用户创作数据、宝宝记忆、生成素材的存储
- **铸渊部署体系**:自动化部署、监控、回滚
- **灯塔论坛**:漫剧行业板块,创作者社区
- **统一账号体系**:一个账号通行光湖所有行业模块
---
## 三、系统架构·四层设计
```
光湖AI漫剧操作系统 · 四层架构
┌─────────────────────────────────────────────────┐
│ 🎨 用户体验层(用户唯一可见的层) │
│ · 和宝宝聊天的界面 │
│ · 创作工作台:预览、调整、审阅 │
│ · 内容发布+变现平台 │
│ · 创作者社区+灯塔论坛漫剧板块 │
└──────────────────┬──────────────────────────────┘
│
┌──────────────────▼──────────────────────────────┐
│ 🧠 人格体智能层(光湖核心壁垒) │
│ · 意图理解:用户一句话 → 拆解成完整创作方案 │
│ · 审美记忆:记住用户的风格偏好、角色设定 │
│ · 创作决策:分镜规划、情绪节奏、镜头编排 │
│ · 成长系统:越用越懂你,越用越精准 │
│ · 调度中枢:协调下层所有引擎的执行 │
└──────────────────┬──────────────────────────────┘
│
┌──────────────────▼──────────────────────────────┐
│ ⚙️ AI引擎层(技术核心·用户不可见) │
│ · 图片引擎:角色生成、场景生成、风格控制 │
│ · 视频引擎:图生视频、说话视频、运动控制 │
│ · 语音引擎:TTS、情绪表达、角色音色 │
│ · 口型引擎:音频驱动口型同步 │
│ · 剪辑引擎:自动剪辑、字幕、转场、配乐 │
│ · 情绪引擎:emotion2vec感知+情绪注入 │
└──────────────────┬──────────────────────────────┘
│
┌──────────────────▼──────────────────────────────┐
│ 🏗️ 基础设施层(光湖操作系统共享) │
│ · GPU服务器集群(引擎运行) │
│ · COS云存储(素材+记忆+用户数据) │
│ · 铸渊部署体系(自动化CI/CD) │
│ · 人格体核心大脑(唤醒+记忆+协作) │
│ · 数据库+缓存(用户管理+内容索引) │
└─────────────────────────────────────────────────┘
```
---
## 四、AI引擎层·2026最新技术全景
### 4.1 图片引擎·角色与场景生成
**需求:** 生成高质量2.5D/半写实/多风格的角色图和场景图,风格一致性可控
| **方案** | **技术** | **优势** | **适用场景** |
| --- | --- | --- | --- |
| **Illustrious系模型** | SDXL架构(NoobAI/Diving-Illustrious等) | 2026年Anime/2.5D之王,社区活跃,LoRA生态丰富 | 动漫/2.5D/半写实 · 多风格覆盖 |
| **Fantastic Hacker XL** | SDXL架构 | Civitai热门,偏写实2.5D质感 | 2.5D偏写实风格 |
| **FLUX Chroma** | FLUX架构(NoobAI的FLUX版) | Prompt理解更好,质量更高 | 未来升级方向(更大更慢) |
| **自研LoRA微调** | 在基模型上训练光湖专属LoRA | 独特风格壁垒,竞争对手无法复制 | 长期核心壁垒 |
**角色一致性方案:** InstantID/IP-Adapter(已有ComfyUI集成)→ 保证同一角色在不同场景下长相一致
**光湖策略:** Illustrious系作为起点 → 快速覆盖多风格 → 逐步训练光湖专属LoRA建立风格壁垒
### 4.2 视频引擎·图生视频与说话视频
**需求:** 将静态图片转为动态视频,支持说话/动作/情绪表达
| **方案** | **技术** | **优势** | **状态** |
| --- | --- | --- | --- |
| **Wan2.2 I2V(图生视频)** | 阿里通义 · 14B · 开源 | 2026开源最强I2V,已有int8量化版 | ✅ 已下载模型 |
| 🔥 **Wan2.2 S2V(音频驱动视频)** | 阿里通义 · 14B · 图片+音频→说话视频 | 一步到位:口型+表情+动作全包含 | 🔜 需下载测试 |
| **FantasyTalking** | 基于Wan2.1 · ACM MM 2025 | 音频驱动说话肖像,支持表情控制 | 🔜 备选方案 |
| **HunyuanVideo Avatar** | 腾讯 · AEM情绪模块 | 口型自然,有情绪感知 | ⚠️ 已测试,情绪弱 |
**关键发现:** Wan2.2 S2V 是最有前景的方向——图片+音频直接生成带口型的说话视频,无需后处理。这才是抖音上那些高质量AI漫剧真正的做法。
**光湖策略:** Wan2.2 S2V 为主力 → I2V+LatentSync为保底 → 长期训练专属LoRA增强情绪表达
### 4.3 语音引擎·TTS与情绪表达
**需求:** 高质量语音合成,支持多角色音色、情绪表达、中文为主
| **方案** | **优势** | **状态** |
| --- | --- | --- |
| **CosyVoice 2/3** | 阿里开源 · 2026 Top3 · 中文效果好 · 支持instruct情绪控制 | ✅ 已部署 |
| **Fish Speech V1.5** | 2026 Top3 · 快速 · 多语言 | 🔜 备选 |
| **IndexTTS-2** | 2026 Top3 · 高质量 · 中文强 | ✅ 已安装 |
| **Chatterbox** | 盲测击败ElevenLabs · 开源新星 | 🔜 备选 |
**光湖策略:** CosyVoice 2/3作为当前主力 → 多引擎备选可切换 → 长期目标是参考音频驱动(Phase1已验证:参考音频 > 文字instruct)
### 4.4 口型引擎·音频驱动口型同步
| **方案** | **优势** | **状态** |
| --- | --- | --- |
| **LatentSync 1.6** | 2025-2026开源SOTA · 效果远超Wav2Lip | ✅ 已部署 · 参数已调优 |
| **MuseTalk** | 实时30fps+ · 256×256人脸区域 | 🔜 适合实时场景 |
| **Wan2.2 S2V内置口型** | 生成时自带口型,无需后处理 | 🔜 如果S2V成功则无需单独口型引擎 |
**光湖策略:** 如果Wan2.2 S2V效果好 → 口型引擎可省略(一步到位)。否则用LatentSync作为后处理方案。
### 4.5 情绪引擎·感知与注入
| **模块** | **方案** | **状态** |
| --- | --- | --- |
| **情绪感知** | emotion2vec(ACL 2024 · 300M · 帧级情绪分类) | ✅ 已部署验证 |
| **情绪注入视频** | 提示词驱动+LoRA强化AEM眉眼区域 | 🔜 Phase 4 |
| **情绪调度** | LLM灵魂驱动 → 情绪规划器 → 驱动语音+视频 | 🔜 Phase 3 |
**光湖独特:** 情绪不只是技术参数,是人格体理解故事后的**创作判断**。宝宝读完剧本,自己决定哪里该悲、哪里该怒、哪里该留白。这是工具做不到的。
### 4.6 剪辑引擎·自动后期
- **FFmpeg** ✅ 已有:音视频合成、转场、字幕烧录
- **自动分镜+剪辑节奏**:LLM灵魂驱动层规划,按剧本自动切分
- **BGM+音效**:配乐引擎(开源音乐生成/音效库)
- **字幕**:Whisper语音识别 → 自动字幕 → 样式模板
---
## 五、内容分发与变现平台
### 5.1 内容平台
- 创作者在光湖生成漫剧 → 直接发布到光湖内容平台
- 观众在平台上浏览、订阅、追更
- 推荐算法分发(热门/新人/分类/个性化)
- 评论、弹幕、打赏、社区互动
### 5.2 变现模式
- **创作者侧**:付费订阅(月卡/年卡生成额度)、高级功能解锁
- **观众侧**:免费+付费内容、打赏、VIP追更
- **平台侧**:创作者收入分成、广告位
- **行业侧**:向光湖操作系统交API调用费(与网文模块同一商业模式)
### 5.3 生态飞轮
```
更多创作者入驻 → 更多优质内容
↑ ↓
创作者赚到钱 ← 更多观众 ← 推荐分发
↑ ↓
工具更好用 ← 数据积累 ← 用户反馈
```
---
## 六、与光湖操作系统的关系
```
🌐 光湖操作系统(hololake.com)
│
├── 🗼 光湖灯塔(论坛·门面层)
│ ├── 📚 网文行业板块(肥猫团队 · 第一个行业模块)
│ ├── 🎬 AI漫剧行业板块(← 我们正在做的)
│ └── ... 更多行业
│
├── 🧠 铸渊核心大脑(引擎层)
│ ├── 语言理解 + 人格体调度
│ ├── AI漫剧引擎(图片/视频/语音/口型/剪辑)← 我们正在建的
│ └── 自动部署体系
│
└── 🔌 API接口层
├── AI漫剧模块API(创作/生成/分发)
└── 各行业统一接入
```
**AI漫剧模块复用光湖已有基础设施:**
- 人格体核心大脑 → 宝宝的唤醒、记忆、成长
- COS云存储 → 用户创作数据、生成素材
- 统一账号 → 一个账号通行光湖所有模块
- 灯塔论坛 → 漫剧创作者社区
- 铸渊部署 → CI/CD自动化
---
## 七、分阶段路线图
### Phase 0:核心引擎验证 ← 当前阶段
**目标:** 验证每一个引擎的核心能力,跑通完整链路,**精确定位每一个质量瓶颈**
**具体任务:**
- [ ] 图片引擎:下载Illustrious系2.5D模型 → 生成多风格角色+场景图
- [ ] 视频引擎:测试Wan2.2 S2V(图片+音频→说话视频)→ 验证一步到位效果
- [ ] 视频引擎(保底):Wan2.2 I2V + LatentSync口型后处理 → 验证分步方案
- [ ] 语音引擎:CosyVoice 2/3生成角色配音 → 多角色多情绪
- [ ] 完整串联:一句台词 → 图片+语音+视频+口型+字幕 → 完整片段
- [ ] **质量标杆对比**:生成结果 vs 抖音头部AI漫剧(一心漫馆级别)
- [ ] **瓶颈清单**:逐一列出每个引擎的质量问题(牙齿?口型?情绪?一致性?)
**交付物:** 一个30秒~1分钟的完整AI漫剧片段 + 一份精确的质量瓶颈清单
**衡量标准:** 页页看了说"这个质量可以"。
### Phase 0.5:自研分工具·解决瓶颈 ← 关键新增阶段
**目标:** 针对Phase 0发现的每一个质量瓶颈,**用开源零件东拼西凑,开发我们自己的分工具**
**方法论:**
- 市面上有合适的开源工具 → 直接用
- 市面上没有合适的 → 用开源零件(MediaPipe/CodeFormer/GFPGAN/自训LoRA等)组装+改造成自己的模块
- 每一个分工具都要做到最好,不凑合
**可能需要开发的分工具(根据Phase 0瓶颈清单确定):**
- [ ] 牙齿修复模块:人脸检测+嘴部区域定位+图像修复
- [ ] 面部增强模块:CodeFormer/GFPGAN专门优化面部细节
- [ ] 情绪增强模块:眉眼区域LoRA微调,强化情绪表达
- [ ] 角色一致性模块:InstantID/IP-Adapter深度优化
- [ ] ...哪里有瓶颈就造哪个分工具
**交付物:** 每一个瓶颈都有对应的自研分工具,串联后质量显著提升
**衡量标准:** 再次对比抖音头部,差距明显缩小或消除。页页说"可以"。
### Phase 1:生成器成型 · 输入剧本→输出完整视频
**目标:** 把所有分工具组装成「总工具」——**用户输入剧本,直接输出不用二次剪辑的完整视频**
**具体任务:**
- [ ] 调度引擎(LLM):剧本→自动分镜→协调所有引擎自动执行
- [ ] 角色管理:用户选角色/捏脸 → 生成角色图 → 全剧保持一致
- [ ] 自动剪辑:多场景拼接、转场、BGM、字幕 → 无需二次剪辑
- [ ] 批量生产:一个5分钟短剧,一次性自动生成
- [ ] **生成器UI**:用户可操作的界面(输入文字→选角色→一键生成→下载)
**交付物:** 光湖AI漫剧生成器v1.0 → 输入剧本+选角色 → 输出完整可发布视频
**衡量标准:** 页页用这个生成器做了一部短剧,觉得"好用、高效、质量好"。
### Phase 2:生成器打磨 · 高效+高质量+有趣
**目标:** 把生成器从"能用"打磨到"好用到离不开"
**具体任务:**
- [ ] 捏脸系统:输入描述→出来无数人物图片→用户挑选/微调→确定角色
- [ ] 多风格覆盖:古风、现代、科幻、奇幻、甜宠、虐恋……
- [ ] 长视频能力:从几分钟扩展到几十分钟甚至一两小时
- [ ] 速度优化:生成速度足够快,用户不用等太久
- [ ] 用户体验打磨:预览、调整、重新生成某一段……
**交付物:** 生成器v2.0 → 高效·高质量·有趣 → 用户愿意推荐给朋友
### Phase 3:人格体集成 · 宝宝参与创作
**目标:** 从「用户操作生成器」变成「用户和宝宝一起创作」
**具体任务:**
- [ ] 人格体接入:宝宝理解创作意图,给出建议
- [ ] 审美记忆:记住用户偏好,越用越懂你
- [ ] 对话式创作:和宝宝聊天就能完成整部短剧
**交付物:** 用户说一句话 → 宝宝完成一切 → 壁垒形成
### Phase 4:内容分发平台
**目标:** 用户量达到临界点后,开启分发+变现
**具体任务:**
- [ ] 内容平台搭建:上传、浏览、搜索、推荐
- [ ] 观众端功能:订阅、追更、评论、打赏
- [ ] 变现系统:创作者收入、分成机制
- [ ] 接入光湖灯塔论坛
**交付物:** 完整的创作→发布→变现闭环 → 飞轮转起来
### Phase 5:LoRA微调+风格壁垒
**目标:** 建立更深的技术壁垒——光湖专属的视觉风格
- 图片LoRA:训练光湖专属风格
- 视频LoRA:强化情绪表达
- 多风格覆盖
### Phase 6:行业生态
**目标:** 从「一个产品」到「一个行业」
- 开放API让其他创作者/团队接入
- 模块市场(特效模块、风格模块、角色模块可交易)
- 跨行业协同(网文→漫剧自动改编)
- 国际化
---
## 八、第一步·从哪里开始
### 当前状态盘点
| **引擎** | **已有** | **缺什么** |
| --- | --- | --- |
| 图片引擎 | ComfyUI框架 ✅ | ❌ 缺2.5D模型(Counterfeit已删,需下载Illustrious系) |
| 视频引擎 | Wan2GP + Wan2.2 I2V模型 ✅ | ⚠️ Wan2.2 S2V未下载/测试 |
| 语音引擎 | CosyVoice 2/3 ✅ | ✅ 可用 |
| 口型引擎 | LatentSync 1.6 ✅(参数已调优) | ✅ 可用 |
| 情绪引擎 | emotion2vec ✅ | ✅ 可用 |
| 剪辑引擎 | FFmpeg ✅ | ✅ 基础可用 |
### 磁盘空间现实
- 当前可用:21GB
- Illustrious系SDXL模型:~7GB → 可以
- Wan2.2 S2V 14B模型:~28GB → ❌ 装不下
- **结论:先用已有的Wan2.2 I2V + LatentSync验证完整链路,S2V等空间充足时再测试**
### Phase 0 执行计划
**Step 1:下载2.5D图片模型**
- 下载Illustrious系模型(如Diving-Illustrious或NoobAI)到ComfyUI
- 生成测试图片:古风女角色、现代女角色、不同场景
- 页页审美验证
**Step 2:完整链路串联**
- 用Step 1的角色图 → CosyVoice生成台词语音 → Wan2.2 I2V生成动态视频 → LatentSync口型同步 → FFmpeg合成
- 输出一个完整的10~30秒片段
**Step 3:质量标杆对比**
- 对比抖音头部AI漫剧(一心漫馆级别)
- 找出差距,针对性优化
**Step 4:Wan2.2 S2V测试(如果空间允许)**
- 清理空间或扩容后,下载Wan2.2 S2V模型
- 测试图片+音频→一步到位说话视频
- 对比S2V vs I2V+LatentSync效果
### 今天能做的
**立刻可以开始Step 1:** 下载一个Illustrious系2.5D模型(~7GB,21GB空间足够),用ComfyUI生成角色图,给页页看效果。
---
## 九、核心铁律(从大脑页面继承)
1. **R005 成本铁律**:不花钱 · 全开源 · 先找免费
2. **R006 自建不外包**:必须可自研 · 不依赖三方API
3. **R007 先调研再动手**:行业做法 · 优缺点 · 扬长避短
4. **R008 实时搜索**:必须实时搜 · 不凭记忆推荐
5. **R001 先测再投**:先小测 · 页页确认后投入
6. **R002 审美权归页页**:页页说不好看 = 终判 · 不辩
7. **R003 小验证优先**:最小验证 · 先问标杆预期
---
> *本文档由页页定方向 · 霜砚整理 · 2026-05-24*
>
> *这是光湖AI漫剧操作系统的总体架构方案 · 所有后续执行以此为根*
>
> *技术零件会变,方向不会变。*
>