热门

最新

红包

立Flag

投票

同城

我的

发布
devhero
op7418
2 年前
truedevhero

卧槽,这个效果好好。Champ 基于 3D 的人物图片转视频动画。

提供一个原始视频加上一张图片就可以让图片动起来。

项目简介:

使用了 SMPL 模型生成的渲染深度图、法线贴图和语义贴图,结合基于骨架的动作指导,为潜在扩散模型提供了全面的 3D 形状信息和详细的动作属性。

还使用了一个多层运动融合模块,该模块整合了自注意力机制,能够在空间层面上整合形状和动作的信息。

通过将 3D 人类参数模型作为动作指导的依据,可以在参考图像和源视频动作之间进行精确的形状匹配。

在标准数据集上的实验评估显示,这种方法在生成高质量人类动画方面具有卓越的性能,能够准确地捕捉到动作和形状的变化。

此外,此方法在新的自然数据集上也展现出了优秀的泛化能力。

项目地址:
https://fudan-generative-vision.github.io/champ/#/

CSDN App 扫码分享
分享
2
156
  • 复制链接
  • 举报
下一条:
一周小结来啦
立即登录