文生视频 / 图生视频
视频链路变化快,本节讲 稳定思路,节点名以你安装的扩展为准。
两种主流入口
| 类型 | 输入 | 说明 |
|---|---|---|
| T2V 文生视频 | 文本 | 直接出短视频,可控性一般 |
| I2V 图生视频 | 一张关键帧 + 文本 | 更适合短剧分镜(先定妆出图再动) |
推荐短剧:先文生图关键帧 → I2V,而不是纯碰运气 T2V。
text
文生图关键帧(锁角色)
→ I2V(写清缓慢动作 + 镜头运动)
→ 可选:延长 / 插帧 / 放大
→ 导出到剪辑软件视频比图片更吃什么
| 资源 | 说明 |
|---|---|
| 显存 | 帧数↑、分辨率↑ 暴涨 |
| 时间 | 数秒视频可能远慢于单图 |
| 一致性 | 脸、手指、字幕伪影更明显 |
务实参数
先 短、小、慢动作:2–5 秒、较低分辨率、slow push-in,跑通再加长。
提示词(运动)
更稳
text
slow push in, subtle breathing, gentle hair movement,
character keeps the same face, cinematic, smooth motion慎用
text
fast spin, rapid dance, extreme warp, chaotic camera shake,
crowd running, hands close-up with complex fingers负向(示例)
text
morphing face, extra limbs, flicker, heavy blur,
random subtitles, watermark, distorted hands参数思维(不同模型名字不同)
| 概念 | 含义 | 入门策略 |
|---|---|---|
| frames / length | 帧数或秒数 | 先短 |
| fps | 帧率 | 16–24 常见 |
| motion strength | 运动幅度 | 从低到中 |
| seed | 复现 | 对比时固定 |
| cfg / guidance | 文本约束 | 按模型文档 |
文件与命名(短剧友好)
text
projects/drama-e01/
stills/E01_S01_hero.png
video/E01_S01_v1.mp4
video/E01_S01_v2.mp4
workflows/i2v_character_lock.jsonbash
# 示例:按镜头号列目录
dir D:\AI\ComfyUI\output与剪辑衔接
| 步骤 | 说明 |
|---|---|
| 导出 | mp4/webm 视节点支持 |
| 剪辑 | 到 PR / 剪映 / Resolve 等 |
| 音画 | 对白用 TTS,口型不对切反应镜头 |
参见:AI 短剧 · 总览 · 一致性方法
安装视频相关节点前
- 默认 文生图 已稳定
- 阅读扩展 README 的 模型下载路径
- 一次只加一组视频节点,避免连环缺依赖
text
custom_nodes/
SomeVideoNodes/
models/
(扩展要求的 diffusion / clip / vae 等)验收
- [ ] 能从单图 I2V 出 2s+ 可看片段
- [ ] 会控制运动幅度避免脸崩
- [ ] 素材按镜号归档