IT之家 11 月 22 日消息,英伟达(NVIDIA)于上周五推出了全新的 AI 工具 Magic3D,可以基于文本描述自动生成 3D 模型。诸如,用户在输入“一只坐在睡莲上的蓝色毒镖蛙”之后,Magic3D 在大约 40 分钟内就能生成一个配有彩色纹理的 3D 网格模型。
英伟达将 Magic3D 对标谷歌的 DreamFusion。DreamFusion 是谷歌研究人员在 9 月宣布的一种文本到 3D 模型的 AI 工具。与 DreamFusion 使用文本到图像模型生成 2D 图像,然后优化为体积 NeRF(神经辐射场)数据的方式类似,Magic3D 的渲染过程也分为两个步骤,将低分辨率生成的粗略模型优化为高分辨率。
Magic3D 还可以对 3D 模型进行基于提示的编辑。给定一个低分辨率的三维模型和一个基本的提示,就可以改变文字来改变生成的模型。另外,Magic3D 的作者还展示了在几代人中保留相同的主题(这个概念通常被称为一致性),并将二维图像(如立体派绘画)的风格应用于三维模型。
IT之家了解到,英伟达没有随其学术论文发布任何 Magic3D 代码。
,