
如何减少 AI 视频中的面部、肢体和背景漂移
通过判断源帧、运动、镜头、时长或场景复杂度是否导致可见失败,来排查短 AI 视频漂移。
漂移是提示词未请求的可见变化:面部逐渐改变、肢体失去连贯性、服装细节在帧与帧之间移动,或背景线条弯曲和跳动。即使第一帧看起来正确,它也可能出现,因为视频生成必须跨时间保持关系。
没有提示词能保证完美的一致性。实际目标是找出可能的原因,进行一次受控更改,并判断下一次测试是否更好。
在重新生成前对失败进行分类
从头到尾观看片段,并在问题出现的首帧暂停。将其归类为以下四种类型之一:
- 身份漂移:面部结构、头发或标志性特征发生变化;
- 解剖结构漂移:手、手臂、腿或身体交接处变形;
- 服装或物体漂移:细节出现、消失或改变形状;
- 背景漂移:墙壁、家具、反射或直线意外弯曲或移动。
最早可见的失败通常比最差的最终帧更有用,因为它显示了是哪种运动触发了不稳定。
当面部发生变化时
首先检查源图像。面部太小、被部分遮挡、阴影强烈或角度极端,会给模型提供较不稳定的信息。
对于下一次测试:
- 使用更清晰的源素材,或减少裁剪歧义;
- 要求更小的头部运动;
- 使用锁定相机或轻微推近;
- 缩短时长;
- 添加一条简洁的身份保持指令。
不要在保留大幅运动的同时添加一长串面部细节。该运动可能仍要求比画面能支持的更多变化。
当手部或肢体变形时
手部和相互重叠的肢体对遮挡很敏感。检查源图是否已经包含交叉的手指、融合的边缘、被遮住的关节或离开画面的肢体。
尝试使用分离更清晰的源图,或选择不需要隐藏肢体重新出现的运动。减小动作范围,并避免在同一短片段中把身体运动与大幅镜头平移结合起来。
如果起始人体结构较弱,请在再次尝试视频生成前修复或替换图像。使用 图生图 用于有针对性的修正,而不是要求运动提示词同时解决源素材和动画问题。
当服装或物体发生变化时
小型重复图案、珠宝、绑带和重叠道具会随着主体移动而发生变化。确定哪个细节是必要的。在一条稳定性指令中提及该细节,并简化其他运动。
如果物体从身体后方经过或离开裁剪范围,模型必须推断其被遮挡的形状。换一个不同的起始姿势可能比反复改写提示词更有效。
当背景弯曲或闪烁时
背景漂移常常在门框、瓷砖、镜子、家具边缘和重复图案周围变得可见。相机运动暴露更多场景,并增加必须保持连贯的几何结构数量。
对于下一次测试:
- 锁定相机;
- 减少主体运动;
- 使用更短的时长;
- 移除不必要的环境运动;
- 选择更干净的背景,或让主体与背景之间保持更宽的间隔。
倒影需要特别关注,因为它们必须随主体一致变化。如果倒影不重要,请选择没有倒影的源图。
将提示词问题与源图问题分开
提示词问题通常出现在指令相互冲突、过于宽泛或要求过多动作时。源素材问题在生成前就能看出来:解剖结构不清晰、裁剪空间不足、边缘粘连或几何结构复杂。
使用此决策规则:
- 如果源图没有清楚包含所需信息,请更换源图。
- 如果源图干净,但片段尝试的内容过多,请简化提示词。
- 如果两者都受控,但漂移随时间增加,请缩短时长或测试另一个可用模型。
该 首帧检查清单 有助于在生成前识别源图问题。
每次测试只更改一个变量
保留一份简短的测试记录。例如:
- 测试甲:第 1 帧,基线提示词,5 秒,768P。面部在第四秒发生变化。决定:减小头部转动幅度。
- 测试乙:第 1 帧,更小的头部转动,5 秒,768P。面部在整个片段中保持稳定。决定:保留新方向。
不要将此示例视为性能保证。其目的是展示受控比较如何让下一步决策变得清晰。
有意识地使用时长和分辨率
MuseUnbound 当前支持 5 到 15 秒的图生视频时长,创建界面中提供 768P 和 1080P 选项。时长会影响模型必须维持场景的时间。分辨率会影响输出细节,但不能替代稳定的源图和明确的运动方向。
从能够测试该动作的最短片段开始。一旦运动稳定,仅在最终用途需要时才增加时长或分辨率。每次运行前查看所选模型和时长显示的积分估算。
检查整个片段的成功情况
片段稳定与否,并不只取决于开头帧是否与源素材匹配。请检查开头、中间和结尾是否存在:
- 身份连续性;
- 清晰可辨的手和四肢;
- 衣物和物体保持一致;
- 稳定背景几何结构;
- 一个可用的最终帧。
如果小缺陷只在结尾出现,请判断裁剪是否合适,或者最后一帧是否对延续很重要。如果同样的失败在每次尝试中都更早出现,请重新检查源图,而不是生成更多变体。
受控的恢复序列
当片段发生漂移时,按此顺序处理:
- 识别首个失败点并进行分类;
- 检查源帧中的对应区域;
- 减少主体或相机运动;
- 缩短时长;
- 比较时保持模型和分辨率固定;
- 重新生成一次并对比相同帧;
- 保留改进、更换源图或停止。
如需帮助构建修订后的指令,请使用 运动提示词指南. 当来源和提示词准备好后,继续在 MuseUnbound 图生视频 使用经授权、明确为成人且遵循以下内容的材料 内容政策.
