随着Stable Video Diffusion技术的不断成功,StabilityAI公司正在通过引入全新的视图合成和3D生成功能来推动技术的边界。这一新模型的创新之处在于,它能够轻松地从单张图像输入中创建3D视频。让深入了解这一激动人心的技术进步的关键特性和影响。
Stable Video 3D标志着3D技术的重大飞跃,与之前的模型相比,提供了极大的质量和视图一致性的提升。该模型有两种变体,SV3D_u和SV3D_p,它们能够无缝地从单张图像输入中生成轨道视频和3D网格,满足广泛的创意需求。
Stable Video 3D的一个突出特点是其能够从任何角度合成一致的视图。这是传统3D生成模型面临的挑战之一。通过利用多视图一致性并优化3D神经辐射场(NeRF),SV3D提供了令人印象深刻的结果。此外,它增强了姿态可控性,并确保了在多个视图中对象外观的一致性。