新的Meta 3D Gen可以在不到一分钟的时间内从文本生成高质量的3D资产
•
2024-07-13 10:56:42
摘要 创建3D 资产是最耗时且最具挑战性的创意任务之一。如果 AI 助手能够根据文本输入生成 3D 内容，它将使 3D 内容创建变得民主化，并为...
创建3D 资产是最耗时且最具挑战性的创意任务之一。如果 AI 助手能够根据文本输入生成 3D 内容，它将使 3D 内容创建变得民主化，并为视频游戏和电影行业以及开发 AR 和 VR 应用提供巨大帮助。
Meta 的 AI 研究团队最近推出了 Meta 3D Gen (3DGen)，这是一款用于文本到 3D 资产生成的全新先进系统。Meta 声称，这款新系统可以在不到一分钟的时间内生成高质量的 3D 资产。生成的 3D 资产将同时具有高分辨率纹理和材质贴图。3DGen 还支持基于物理的渲染 (PBR) 和对先前生成的 3D 资产进行生成性重新纹理化。
Meta 3D Gen 结合了两个主要组件：文本到 3D 生成和文本到纹理生成。其工作原理如下：
第 1 阶段：3D 资产生成 - 根据用户提供的文本提示，第 I 阶段使用 Meta 的 3D AssetGen 模型 (AssetGen) 创建初始 3D 资产。此步骤生成带有纹理和 PBR 材质贴图的 3D 网格。推理时间约为 30 秒。
第二阶段：
用例 1：生成式 3D 纹理细化 - 给定第 1 阶段生成的 3D 资产和初始文本提示，第 2 阶段将为该资产生成更高质量的纹理和 PBR 贴图。它利用 Meta 的文本到纹理生成器 Meta 3D TextureGen。推理时间约为 20 秒。
用例 2：生成式 3D(重新)纹理化 - 给定一个无纹理的 3D 网格和一个描述其所需外观的提示。第 2 阶段还可以从头开始为该 3D 资产生成纹理(网格可以是先前生成的，也可以是艺术家创建的)。推理时间约为 20 秒。
版权声明：本文由用户上传，如有侵权请联系删除！
标签：