视频生成漂移问题新解法
推荐指数 75.0 NO. 018 · 2026.10.07
upvotes27comments1
为什么值得看
提出测试时分布内强制方法,解决自回归视频扩散模型生成长视频时的颜色漂移和运动衰减。不依赖修改KV缓存,而是直接约束KV条目本身保持分布内,突破了训练时长的生成上限。
媒体预览
编辑判断
现有长视频生成方案如StreamingT2V、Mora都靠KV conditioning硬撑,本质是头疼医头——缓存条目本身已经OOD了,怎么调权重都没用。这篇把问题定位到KV provenance,思路类似LLM推理里的KV cache压缩但方向相反:不是删缓存,而是强制新产生的KV别跑偏。
实验细节还没公开,但如果能在超过训练时长2-3倍的视频上保持稳定性,对做AI短剧、广告生成的团队是刚需。建议等代码开源后优先测1080p以上的长镜头场景,这是KV漂移最致命的分辨率区间。