LIFT 是一个统一图生视频框架,在相机轨迹控制之外引入“未来布局(Layout-In-Future)”控制,让用户在给定首帧图像时不仅能指定相机怎么动,还能指定未来(尤其是末帧)画面里应出现什么、出现在哪里;为缓解末帧稀疏布局监督难以学习的问题,作者提出同策略自蒸馏(On-Policy Self-Distillation, OPSD),把密集逐帧布局教师…
值得关注:它把可控视频生成的控制轴从“相机怎么走 + 文本说什么”扩展到“未来某一时刻画面元素在哪”,这是文本提示难以精确表达的一类约束。 大视角变化下会出现首帧不可见区域的生成问题,末帧布局控制为该场景提供了显式锚点。 方法层…