随着元宇宙、数字孪生、游戏及影视制作等多个领域加速构建大规模3D虚拟环境,市场对高效、高质量的内容创作工具需求急剧增长。这些工具必须能够在内容的数量、精度与多样性三个维度上同步实现规模化扩展。因此,一个核心的技术目标变得至关重要:开发出高性能的3D生成式AI模型,能够直接合成带有逼真纹理的3D网格模型。此类模型的输出,必须能够无缝兼容主流3D渲染引擎与工作流,实现“即生成、即使用”,快速赋能下游的各类应用场景。
审视过往的3D生成模型方案,往往存在一些关键短板:部分模型生成的几何形体细节粗糙,缺乏精细度;另一些则在网格拓扑结构上施加了过多限制,灵活性不足;还有的模型完全不支持纹理贴图,或者依赖特定的神经渲染器进行合成,导致其产出无法在Blender、Maya、Unity或Unreal Engine等常规3D软件中直接编辑与应用。这些技术瓶颈,无疑制约了3D生成AI在更广泛产业中的落地与普及。
那么,是否存在一种创新方案,能够系统性突破上述所有限制,实现高质量、可编辑、带纹理的3D资产自动化生成呢?
这正是由NVIDIA研究院推出的GET3D模型所要解决的核心问题。这项突破性研究提出了一种全新的生成式AI架构,能够直接输出具备复杂拓扑结构、丰富几何细节与高保真纹理的显式3D网格。其技术秘诀在于,创造性地整合了近年来在可微曲面建模、可微渲染以及2D生成对抗网络(GAN)三大领域的前沿进展。通过仅使用大规模的2D图像数据集进行训练,GET3D模型无需任何3D监督数据,便能自主学习并深刻理解三维形状的几何与外观规律,最终实现高质量的3D内容生成。
实际生成效果令人印象深刻。GET3D已能稳定产出涵盖汽车、椅子、动物、摩托车、数字人角色以及建筑物等多种复杂类别的高质量纹理化网格。无论是生成结果的视觉保真度、网格的可用性,还是与现有三维管道的兼容性,相较于此前的主流方法,GET3D都实现了质的飞跃,标志着3D生成AI向实用化迈出了关键一步。
