多视角生成3D一致视频新方案
推荐指数 66.0 NO. 030 · 2026.10.30
upvotes42comments1
简介
OmniShowcase 通过几何驱动训练数据和表面法线条件，解决多视角参考图生成视频时的3D一致性问题。对做数字人、电商商品展示、虚拟拍摄的团队有直接价值，能显著减少视角切换时的穿帮和形变。
媒体预览
编辑判断
现有 S2V 方案如 AnimateAnyone、MagicAnimate 处理大视角变化时普遍出现面部扭曲或衣物穿模，本质是缺乏显式几何约束。这篇把表面法线作为硬条件注入扩散模型，相当于给生成过程加了 3D 骨架，比纯注意力机制的多图拼接更可控。
不过论文没提推理速度和显存占用，法线估计网络本身也有误差累积风险。如果开源，建议优先在静态物体展示（家具、商品）场景验证，人物动态场景可能需要额外时序一致性模块。