ComfyUI 制作短剧的 90 天学习计划
结论先说
不要按“学节点大全”的方式学。正确目标是搭一条短剧生产线:剧本拆镜 → 角色定型 → 场景定型 → 分镜出图 → 图生视频/视频补帧 → 配音字幕剪辑 → 批量复用。
一、总周期:90 天
目标不是“会用 ComfyUI”,而是 90 天后能做出:
- 1 条 60-180 秒 AI 短剧样片
- 2-3 个稳定角色模板
- 5-8 个常用场景模板
- 一套可复用 ComfyUI 工作流
- 一套短剧生产 SOP
每天建议 2-3 小时,周末拿半天集中产出。前 30 天学基础,31-60 天做镜头,61-90 天做完整短剧。
二、第 1 阶段:环境和基础,1-7 天
**目标:**能稳定跑图,理解 ComfyUI 的基本逻辑。
要装好
- ComfyUI
- ComfyUI-Manager
- FFmpeg
- Git
- Python 环境
- 常用模型文件夹结构:checkpoints、loras、controlnet、vae、upscale_models、clip、video_models
建议先装这些常用节点
- ComfyUI-Manager:管理插件
- rgthree:界面效率
- ComfyUI-Custom-Scripts:常用增强
- WAS Node Suite:图像处理
- Impact Pack:人脸修复、细节增强
- ControlNet Auxiliary Preprocessors:姿态、深度、线稿预处理
- IPAdapter Plus:角色和风格参考
- VideoHelperSuite:视频导入导出
- AnimateDiff-Evolved 或当前主流视频节点:做视频运动测试
第 1 周只学 8 个核心概念
- Checkpoint:基础模型
- Prompt:正向提示词
- Negative Prompt:反向提示词
- KSampler:采样核心
- Seed:固定随机种子
- Latent:潜空间
- VAE:图像编码/解码
- Save Image:保存输出
第 1 周验收标准
- 能独立搭出 text-to-image 工作流
- 能固定 seed 重复出相似图片
- 能换模型、换尺寸、换采样器
- 能排查模型路径、节点缺失、显存不足这三类常见问题
三、第 2 阶段:图像质量和审美控制,8-21 天
**目标:**从“能出图”到“可用于短剧分镜”。
重点练 5 件事
- 人物:脸、服装、年龄、表情、姿态
- 场景:室内、办公室、街道、车内、卧室、医院、公司前台等短剧高频场景
- 光线:白天、夜晚、霓虹、电影感、监控感、手机拍摄感
- 构图:近景、中景、远景、过肩镜头、低角度、俯拍
- 画幅:9:16 竖屏优先,因为短剧主要是手机观看
这阶段不要追求一张图“惊艳”,而要追求“同一个角色在不同场景里还像同一个人”。
每日练习
- 每天固定一个主题,出 30-50 张图
- 每天选 5 张好图,记录 prompt、模型、seed、尺寸、LoRA 权重
- 建一个“可复用提示词库”,分人物、场景、镜头、光线、风格
第 3 周验收标准
- 能稳定生成 3 个主角:男主、女主、反派/配角
- 每个角色有正脸、半身、全身、不同表情
- 能做 5 个固定场景
- 能控制竖屏短剧画面,不再随机碰运气
四、第 3 阶段:角色一致性,22-35 天
**目标:**解决 AI 短剧最大痛点:人物前后不像。
优先学这几类方法
- IPAdapter:用参考图锁定人物气质和脸部特征
- FaceID / InstantID / PuLID 类方案:增强人脸一致性
- LoRA:后期如果要固定主角,可以训练角色 LoRA
- ControlNet OpenPose:控制动作和姿态
- ControlNet Depth / Canny / Lineart:控制场景结构和构图
学习顺序
- 先用 IPAdapter 做参考图一致性
- 再用 ControlNet 控制动作
- 最后再考虑训练 LoRA
不要一开始就训练 LoRA。新手最大问题不是训练,是不知道自己要什么角色。先用参考图把角色定下来,再训练才有价值。
第 5 周验收标准
- 同一主角能连续生成 20 张不同镜头,观众基本能认出是同一个人
- 能指定“站着、坐着、回头、愤怒、哭、微笑、走路”等动作表情
- 能保持服装和发型大体一致
五、第 4 阶段:短剧分镜能力,36-50 天
**目标:**把剧本变成镜头,而不是只会生成漂亮图。
你要学会拆这几种短剧镜头
- 开场冲突镜头:3 秒内让观众知道发生什么
- 情绪特写:哭、愤怒、震惊、冷笑
- 信息交代镜头:手机聊天、合同、门牌、医院单据、办公室牌子
- 关系镜头:两人对峙、过肩、背影、擦肩而过
- 转场镜头:电梯门、车门、夜景、走廊、楼下等
建议模板
- 每 1 分钟短剧 = 12-20 个镜头
- 每个镜头 3-5 秒
- 先做关键帧,再做视频
- 每个镜头先写一句画面描述,再进 ComfyUI
第 7 周验收标准
- 能把一段 300-500 字剧本拆成 15 个镜头
- 每个镜头能生成 2-3 张可选关键帧
- 角色、场景、服装、情绪基本连续
六、第 5 阶段:图生视频和动作控制,51-70 天
**目标:**让静态分镜动起来。
**现实判断:**本地 ComfyUI 做视频可以学,但短剧商业生产不一定全靠本地。更实用的路线是:ComfyUI 负责角色、场景、关键帧和一致性,视频运动可以结合本地视频模型或云端图生视频工具。
你需要掌握
- Image-to-Video:单张关键帧生成 3-5 秒视频
- Start/End Frame:首尾帧控制镜头变化
- Motion Brush / Camera Motion:控制走路、转头、推拉镜头
- Frame Interpolation:补帧,让画面更顺
- Upscale:视频放大和清晰化
- Face Restore:修脸但不能修到变脸
短剧里最实用的动作不是大动作,而是
- 轻微转头
- 眨眼
- 说话口型
- 推镜头
- 人物走近
- 情绪变化
- 手拿手机/文件
第 10 周验收标准
- 能做 10 个 3-5 秒镜头
- 镜头之间人物不严重变脸
- 能输出 9:16 视频片段
- 能做基本补帧、放大、降噪
七、第 6 阶段:声音、字幕、剪辑,71-80 天
**目标:**把 AI 镜头变成真正短剧,而不是素材堆。
你要配套掌握
- 剪映 / CapCut / Premiere 任一工具
- AI 配音:按角色区分男声、女声、旁白
- 字幕:短剧字幕要大、短、节奏快
- 音效:脚步、门声、手机提示音、环境音
- BGM:情绪铺垫,但不要盖住对白
短剧节奏标准
- 前 3 秒必须有冲突或悬念
- 10 秒内必须交代人物关系
- 每 20-30 秒要有一次反转、爆点或信息推进
- 结尾必须留钩子
第 11 周验收标准
- 能剪出一条 60 秒完整短剧
- 有对白、字幕、音效、BGM
- 不是“AI 图展示”,而是有剧情推进
八、第 7 阶段:完整样片和 SOP,81-90 天
**目标:**做出第一条可复用样片。
最终作业
- 选一个短剧题材:霸总、逆袭、悬疑、家庭冲突、职场冲突都可以
- 写 1 集 60-180 秒脚本
- 拆 15-40 个镜头
- 生成主角设定图
- 生成场景设定图
- 生成每个镜头关键帧
- 图生视频
- 剪辑配音
- 输出成片
- 复盘耗时、失败率、返工原因
你要沉淀 4 个文件
- 角色库:每个角色的参考图、prompt、seed、LoRA/IPAdapter 设置
- 场景库:常用场景模板
- 镜头库:常用短剧镜头模板
- 工作流库:文生图、角色一致性、ControlNet、图生视频、修脸、放大、批量出图
九、每天怎么练
每天 2 小时版本
- 20 分钟:看一个节点/工作流教程
- 60 分钟:照着复现
- 30 分钟:改参数做对比
- 10 分钟:记录今天有效设置和失败原因
每天 4 小时版本
- 30 分钟:学习
- 90 分钟:复现
- 90 分钟:围绕短剧镜头实战
- 30 分钟:整理 prompt、截图、工作流 JSON
十、最重要的判断
ComfyUI 对短剧的价值,不在于“生成一张漂亮图”,而在于把不可控的 AI 出图变成可复用的生产系统。
你优先掌握这 6 项就够了
- 角色一致性
- 姿态控制
- 场景一致性
- 镜头语言
- 图生视频
- 批量化工作流
暂时不要浪费太多时间在
- 盲目换模型
- 收集几百个 LoRA
- 研究冷门节点
- 只做美女图
- 只追求单图质感
短剧成败看的是连续镜头、人物稳定、剧情节奏和产能。单图好看只是入门,不是结果。
我建议你第一步就定一个 60 秒短剧样片题材,然后所有学习都围绕这个样片推进。这样 90 天以后,你不是“学过 ComfyUI”,而是已经有一套能继续放大的短剧制作流程。