Meta 公司于 7 月 2 日发布研究论文,介绍了名为 Meta 3D Gen(3DGen)的全新 AI 模型,该模型可以在 1 分钟内基于用户输入的提示词,生成高质量的 3D 内容。
Meta 3D Gen工作原理阶段
Meta 3D Gen 所生成的 3D 内容具备高分辨率纹理和材质贴图,还支持基于物理的渲染(PBR),并能对此前生成的 3D 内容重新再生成新纹理。其工作原理分为两个阶段:
第一阶段:根据用户提供的文本提示,使用 Meta 的三维资产生成模型(AssetGen)创建初始 3D 资产,该步骤生成一个带有纹理和 PBR 材质贴图的 3D mesh,推理时间约为 30 秒;
第二阶段:包含两种情况
- 一是生成更细化的 3D 纹理,根据阶段 1 生成的三维资产和初始文本提示,为该资产生成更高质量的纹理和 PBR 贴图,使用 Meta 的文本到纹理生成器 Meta 3D TextureGen,推理时间约为 20 秒;
- 二是再生成 3D 纹理,给定一个未纹理化的 3D mesh 和一个描述其所需外观的提示,从头开始为该三维资产生成纹理,推理时间约为 20 秒。
Meta 3D Gen论文地址:
地址:详情请点击“查看论文”
与其他类似的 AI 模型相比,3D Gen AI 模型的优势是什么?
Meta 3D Gen AI 模型的优势可能包括以下几点:
- 高效生成:能够在一分钟内生成高质量的 3D 内容,速度比其他替代方案快 3-60 倍。
- 高质量输出:生成的 3D 内容具有高分辨率纹理、材质贴图,支持基于物理的渲染,并且可以重新生成新纹理,效果更加逼真。
- 灵活定制:可以根据用户的文本提示进行定制,生成不同风格和外观的 3D 内容。
- 易于集成:支持基于物理的渲染和人工 3D 网格输入,更容易融入创作者的工作流程。
然而,具体的优势还需要根据实际应用和用户需求来评估。不同的用户可能会根据自己的特定要求和使用场景,对不同的模型特点有不同的侧重点。
Meta 3D Gen AI 模型的出现,无疑将对多个领域产生深远的影响。在游戏开发领域,它可以快速生成逼真的游戏场景和角色模型,缩短游戏开发周期,提高游戏质量。在影视制作中,能够为特效制作提供更加便捷的解决方案,创造出更加震撼的视觉效果。此外,在建筑设计、虚拟现实等领域,Meta 3D Gen 也将发挥重要作用,为设计师和创作者提供强大的支持。
总之,Meta 3D Gen AI 模型的发布是 3D 内容创作领域的一个重要里程碑,它的出现将推动 3D 技术的发展,为人们带来更加丰富、精彩的 3D 体验。我们期待着这个模型在未来的应用中不断展现其强大的实力,为各个领域带来更多的创新和突破。