Skip to content

ComfyUI 制作短剧的 90 天学习计划 ​

结论先说 ​

不要按“学节点大全”的方式学。正确目标是搭一条短剧生产线:剧本拆镜 → 角色定型 → 场景定型 → 分镜出图 → 图生视频/视频补帧 → 配音字幕剪辑 → 批量复用。

一、总周期:90 天 ​

目标不是“会用 ComfyUI”,而是 90 天后能做出:

  • 1 条 60-180 秒 AI 短剧样片
  • 2-3 个稳定角色模板
  • 5-8 个常用场景模板
  • 一套可复用 ComfyUI 工作流
  • 一套短剧生产 SOP

每天建议 2-3 小时,周末拿半天集中产出。前 30 天学基础,31-60 天做镜头,61-90 天做完整短剧。

二、第 1 阶段:环境和基础,1-7 天 ​

**目标:**能稳定跑图,理解 ComfyUI 的基本逻辑。

要装好 ​

  • ComfyUI
  • ComfyUI-Manager
  • FFmpeg
  • Git
  • Python 环境
  • 常用模型文件夹结构:checkpoints、loras、controlnet、vae、upscale_models、clip、video_models

建议先装这些常用节点 ​

  • ComfyUI-Manager:管理插件
  • rgthree:界面效率
  • ComfyUI-Custom-Scripts:常用增强
  • WAS Node Suite:图像处理
  • Impact Pack:人脸修复、细节增强
  • ControlNet Auxiliary Preprocessors:姿态、深度、线稿预处理
  • IPAdapter Plus:角色和风格参考
  • VideoHelperSuite:视频导入导出
  • AnimateDiff-Evolved 或当前主流视频节点:做视频运动测试

第 1 周只学 8 个核心概念 ​

  • Checkpoint:基础模型
  • Prompt:正向提示词
  • Negative Prompt:反向提示词
  • KSampler:采样核心
  • Seed:固定随机种子
  • Latent:潜空间
  • VAE:图像编码/解码
  • Save Image:保存输出

第 1 周验收标准 ​

  • 能独立搭出 text-to-image 工作流
  • 能固定 seed 重复出相似图片
  • 能换模型、换尺寸、换采样器
  • 能排查模型路径、节点缺失、显存不足这三类常见问题

三、第 2 阶段:图像质量和审美控制,8-21 天 ​

**目标:**从“能出图”到“可用于短剧分镜”。

重点练 5 件事 ​

  • 人物:脸、服装、年龄、表情、姿态
  • 场景:室内、办公室、街道、车内、卧室、医院、公司前台等短剧高频场景
  • 光线:白天、夜晚、霓虹、电影感、监控感、手机拍摄感
  • 构图:近景、中景、远景、过肩镜头、低角度、俯拍
  • 画幅:9:16 竖屏优先,因为短剧主要是手机观看

这阶段不要追求一张图“惊艳”,而要追求“同一个角色在不同场景里还像同一个人”。

每日练习 ​

  • 每天固定一个主题,出 30-50 张图
  • 每天选 5 张好图,记录 prompt、模型、seed、尺寸、LoRA 权重
  • 建一个“可复用提示词库”,分人物、场景、镜头、光线、风格

第 3 周验收标准 ​

  • 能稳定生成 3 个主角:男主、女主、反派/配角
  • 每个角色有正脸、半身、全身、不同表情
  • 能做 5 个固定场景
  • 能控制竖屏短剧画面,不再随机碰运气

四、第 3 阶段:角色一致性,22-35 天 ​

**目标:**解决 AI 短剧最大痛点:人物前后不像。

优先学这几类方法 ​

  • IPAdapter:用参考图锁定人物气质和脸部特征
  • FaceID / InstantID / PuLID 类方案:增强人脸一致性
  • LoRA:后期如果要固定主角,可以训练角色 LoRA
  • ControlNet OpenPose:控制动作和姿态
  • ControlNet Depth / Canny / Lineart:控制场景结构和构图

学习顺序 ​

  1. 先用 IPAdapter 做参考图一致性
  2. 再用 ControlNet 控制动作
  3. 最后再考虑训练 LoRA

不要一开始就训练 LoRA。新手最大问题不是训练,是不知道自己要什么角色。先用参考图把角色定下来,再训练才有价值。

第 5 周验收标准 ​

  • 同一主角能连续生成 20 张不同镜头,观众基本能认出是同一个人
  • 能指定“站着、坐着、回头、愤怒、哭、微笑、走路”等动作表情
  • 能保持服装和发型大体一致

五、第 4 阶段:短剧分镜能力,36-50 天 ​

**目标:**把剧本变成镜头,而不是只会生成漂亮图。

你要学会拆这几种短剧镜头 ​

  • 开场冲突镜头:3 秒内让观众知道发生什么
  • 情绪特写:哭、愤怒、震惊、冷笑
  • 信息交代镜头:手机聊天、合同、门牌、医院单据、办公室牌子
  • 关系镜头:两人对峙、过肩、背影、擦肩而过
  • 转场镜头:电梯门、车门、夜景、走廊、楼下等

建议模板 ​

  • 每 1 分钟短剧 = 12-20 个镜头
  • 每个镜头 3-5 秒
  • 先做关键帧,再做视频
  • 每个镜头先写一句画面描述,再进 ComfyUI

第 7 周验收标准 ​

  • 能把一段 300-500 字剧本拆成 15 个镜头
  • 每个镜头能生成 2-3 张可选关键帧
  • 角色、场景、服装、情绪基本连续

六、第 5 阶段:图生视频和动作控制,51-70 天 ​

**目标:**让静态分镜动起来。

**现实判断:**本地 ComfyUI 做视频可以学,但短剧商业生产不一定全靠本地。更实用的路线是:ComfyUI 负责角色、场景、关键帧和一致性,视频运动可以结合本地视频模型或云端图生视频工具。

你需要掌握 ​

  • Image-to-Video:单张关键帧生成 3-5 秒视频
  • Start/End Frame:首尾帧控制镜头变化
  • Motion Brush / Camera Motion:控制走路、转头、推拉镜头
  • Frame Interpolation:补帧,让画面更顺
  • Upscale:视频放大和清晰化
  • Face Restore:修脸但不能修到变脸

短剧里最实用的动作不是大动作,而是 ​

  • 轻微转头
  • 眨眼
  • 说话口型
  • 推镜头
  • 人物走近
  • 情绪变化
  • 手拿手机/文件

第 10 周验收标准 ​

  • 能做 10 个 3-5 秒镜头
  • 镜头之间人物不严重变脸
  • 能输出 9:16 视频片段
  • 能做基本补帧、放大、降噪

七、第 6 阶段:声音、字幕、剪辑,71-80 天 ​

**目标:**把 AI 镜头变成真正短剧,而不是素材堆。

你要配套掌握 ​

  • 剪映 / CapCut / Premiere 任一工具
  • AI 配音:按角色区分男声、女声、旁白
  • 字幕:短剧字幕要大、短、节奏快
  • 音效:脚步、门声、手机提示音、环境音
  • BGM:情绪铺垫,但不要盖住对白

短剧节奏标准 ​

  • 前 3 秒必须有冲突或悬念
  • 10 秒内必须交代人物关系
  • 每 20-30 秒要有一次反转、爆点或信息推进
  • 结尾必须留钩子

第 11 周验收标准 ​

  • 能剪出一条 60 秒完整短剧
  • 有对白、字幕、音效、BGM
  • 不是“AI 图展示”,而是有剧情推进

八、第 7 阶段:完整样片和 SOP,81-90 天 ​

**目标:**做出第一条可复用样片。

最终作业 ​

  • 选一个短剧题材:霸总、逆袭、悬疑、家庭冲突、职场冲突都可以
  • 写 1 集 60-180 秒脚本
  • 拆 15-40 个镜头
  • 生成主角设定图
  • 生成场景设定图
  • 生成每个镜头关键帧
  • 图生视频
  • 剪辑配音
  • 输出成片
  • 复盘耗时、失败率、返工原因

你要沉淀 4 个文件 ​

  • 角色库:每个角色的参考图、prompt、seed、LoRA/IPAdapter 设置
  • 场景库:常用场景模板
  • 镜头库:常用短剧镜头模板
  • 工作流库:文生图、角色一致性、ControlNet、图生视频、修脸、放大、批量出图

九、每天怎么练 ​

每天 2 小时版本 ​

  • 20 分钟:看一个节点/工作流教程
  • 60 分钟:照着复现
  • 30 分钟:改参数做对比
  • 10 分钟:记录今天有效设置和失败原因

每天 4 小时版本 ​

  • 30 分钟:学习
  • 90 分钟:复现
  • 90 分钟:围绕短剧镜头实战
  • 30 分钟:整理 prompt、截图、工作流 JSON

十、最重要的判断 ​

ComfyUI 对短剧的价值,不在于“生成一张漂亮图”,而在于把不可控的 AI 出图变成可复用的生产系统。

你优先掌握这 6 项就够了 ​

  • 角色一致性
  • 姿态控制
  • 场景一致性
  • 镜头语言
  • 图生视频
  • 批量化工作流

暂时不要浪费太多时间在 ​

  • 盲目换模型
  • 收集几百个 LoRA
  • 研究冷门节点
  • 只做美女图
  • 只追求单图质感

短剧成败看的是连续镜头、人物稳定、剧情节奏和产能。单图好看只是入门,不是结果。

我建议你第一步就定一个 60 秒短剧样片题材,然后所有学习都围绕这个样片推进。这样 90 天以后,你不是“学过 ComfyUI”,而是已经有一套能继续放大的短剧制作流程。

历元智能投研 · 由Antares多因子选股系统驱动知识库