Stability AI推出的一款新型3D内容生成工具：Stable Video 3D（SV3D）
它可以基于单张图片，生成该物体的多视角视频和3D模型。
SV3D有两个变体：
• SV3D_u：此变体基于单图像输入生成360度环绕视频，无需相机条件。
• SV3D_p：在SV3D_u的基础上扩展，能够处理单图像和轨道视图，允许沿特定相机路径创建特定视角3D视频。
主要功能特点：
1. 单图像到多视角转换：SV3D能够从单张图片输入，生成该对象的多个视角图像。这意味着用户可以仅提供一个静态图像，SV3D将能够展示该对象从不同角度的样貌。
2.3D模型生成：通过生成的多视角图像，SV3D能够进一步构建对象的3D网格模型，为用户提供一个完整的三维视觉体验。
3. 轨道视频制作：
• SV3D_u变体可以生成围绕物体的轨道视频，这种视频展示了对象从360度各个角度的视图，而无需相机的特定设置。
• SV3D_p变体扩展了这一功能，允许沿着特定的相机路径创建3D视频，适用于需要特定视角序列的场景。
4.高视角一致性与泛化：SV3D利用视频扩散技术提高了生成内容的视角一致性和泛化能力，即从任何角度观察生成的对象时，其外观变化都显得自然和连贯。
5. 高质量的视觉输出：相较于以往的技术和其他开源方案，SV3D在质量、多视角生成以及与原始图像的忠实度方面都有显著提升，生成的图像和视频更加详细、真实。
6. 改进的3D优化：通过改进的3D优化技术，包括解耦照明优化和新的掩蔽分数蒸馏采样损失函数，SV3D能够从单张图片可靠地输出高质量的3D网格。
7. 新视角合成（NVS）的进步：SV3D在新视角合成方面取得重大进步，能够生成从任何角度观察都一致且真实的视图，这对于创建真实感强的3D场景和对象尤为重要。
详细：https://bit.ly/3THno7J
- 复制链接
- 举报
