三花快讯 · 2024, 4月16日

SC4D :视频转4D

SC4D 一种新型的视频到 4D 生成技术,能够从单视角视频中创建动态的3D对象,并将这些对象的运动根据文本描述转移到其他实体上。

SC4D 一种新型的视频到 4D 生成技术,能够从单视角视频中创建动态的3D对象,并将这些对象的运动根据文本描述转移到其他实体上。这项技术的亮点在于:

  1. 分离建模:将运动和外观分开处理,提高了生成的3D对象的质量和效率。
  2. 控制点优化:使用自适应高斯初始化和高斯对齐损失,确保生成对象的形状和运动的真实性和一致性。
  3. 运动转移应用:SC4D能够提取动态3D对象及其运动,进而根据文本描述生成具有相同运动模式的不同实体的动态对象。

商业转载请联系三花微信公众号获得授权,非商业转载请注明本文出处及文章链接,您可以自由地在任何媒体以任何形式复制和分发作品,也可以修改和创作,但是分发衍生作品时必须采用相同的许可协议。

本文采用 CC BY-NC-SA 4.0 - 非商业性使用 - 相同方式共享 4.0 国际 进行许可。