
用参考图片生成视频
学习为 AI 视频挑选参考图、标明参考用途、描述需要保留与需要变化的部分,并检查生成前的模型限制。
参考图提供视觉线索,文字说明镜头接下来怎样变化。两者分工清楚,才能判断结果偏离了哪里。
打开视频工作台先选一张信息清楚的参考
选图时检查主体是否清楚、遮挡是否影响辨认、光线和构图是否与目标镜头一致。先使用一张与当前任务关系最直接的图片。
多张参考可能分别承担人物、空间和风格的作用。不要因为图片好看就全部加入,先写清它们各自为什么有用。
说明哪些信息需要保留
给参考写一句用途说明,例如“人物外观参考”“站台空间参考”或“光线氛围参考”。将人物身份与环境氛围分开,能减少相互冲突的要求。
有些模型将图片作为起始帧,有些支持其他形式的视觉参考。先以模型实际说明为准,再描述想保留的元素。
带到工作台的描述
参考用途:保留图片中旅人的红色外套与短发方向。 镜头变化:旅人由低头变为抬头,摄影机保持中景、缓慢靠近。 环境方向:维持清晨站台的空间关系,远处暖灯亮起。
用文字补上时间里的变化
静态图片不能替你说明动作顺序。写明主体怎样动、摄影机怎样动、背景有没有变化,再检查这些运动是否会互相干扰。
初次尝试尽量保留简单构图和少量运动。若主体与摄影机同时快速变化,比较结果会更困难。
- 添加参考图,并说明它的用途。
- 描述一个连续动作和一种摄影机运动。
- 生成后分别检查参考保留情况与运动是否完成。
把问题写回参考关系
人物偏离时检查人物描述和参考质量;构图偏离时检查景别与图片用途;运动偏离时检查动作是否过多或相互冲突。
不要立即堆入更多参考图。先删除没有明确任务的素材,再用一次只改一项的方法继续。添加自己的素材时,也应确认具有相应使用权。
试写一个镜头
把人物、动作和镜头的关系写清楚,
再带到工作台继续。
清晨站台上的旅人,听见列车后缓慢抬头。中景,摄影机缓慢靠近。保持动作连贯,让观众看清这一刻的变化。
这里用于组织文字;进入工作台后选择模型、核对参数并提交生成。
开始前的几个问题
所有模型都支持相同的参考数量吗?
不同模型的数量、格式、大小和用途限制不同,以工作台对当前模型的说明为准。
参考图能保证人物完全不变吗?
不能保证。应同时保持人物描述稳定,并在生成后检查身份、服装和关键特征。
图生视频一定会保留原图全部内容吗?
具体行为取决于模型与输入方式。建议明确最重要的保留项,避免在同一轮中提出冲突变化。