Autodesk的Bernini项目是3D生成式AI工具。
据知,与许多生成式人工智能工具一样,Bernini 的生成能力与经过适当训练的人类相比存在巨大差距,但 尽管存在局限性,仍是我们见过的功能最强大的3D对象生成器。 它证明了这项看似神奇的技术,可以立即根据文本提示写一篇文章或画一幅画,同样可以用于3D模型。
1. 3D 模型的生成式 AI
如果您使用过 ChatGPT 或任何其他生成式 AI 工具,那么您就会知道 Project Bernini 的工作原理。给它提供一些要生成的内容(提示),AI 就会返回一个3D模型。
输入“水壶”,几秒钟后 Bernini 便会生成一个功能齐全的水壶3D模型,水壶内部是空的,且不漏水。您还可以使用图片、点云或体素文件提示 Bernini。
Autodesk 的Bernini项目以一幅水罐图像(左)为灵感,生成了多个实用的 3D 模型(右)。
与其他生成式 AI 模型一样,Bernini 会提供尽可能多的结果,只要您愿意筛选即可。以下是 Bernini 最初尝试的四把椅子:
在由上图生成的 3D 椅子变体(最左侧)中,Bernini 将椅子的阴影解读为架子。
试验Bernini 对不同搜索词的响应可能会很有趣。不过,它很快就会遇到限制。人工智能生成图形计算器的尝试非常糟糕。
从文本提示“TI-83+ 图形计算器”生成的三种变体。
Bernini 项目接受了 1000 万个 3D 对象的训练,这在生成式 AI 领域是一个微不足道的数字,但该模型仍然可以找到有趣的方法来填补空白。它的训练数据几乎肯定不包括“树狗”,但如果您在提示字段中输入该短语,Bernini 会给出:
一半是树,一半是狗,全是 3D。
Autodesk Research 首席科学家 Daron Green 在 3D 生成器演示期间告诉 Engineering.com:“我们将其视为一种创造性工具。”
格林希望,Bernini 将成为设计师的起点、获得灵感和加快 3D 建模过程的一种方式。
“人们不再需要费力地创造一个 3D 物体,”他说,“而是会得到一大堆他们感兴趣的大致相同的物体。然后他们就可以对它们进行改进。”
目前,生成式 3D 将如何融入建模工作流程仍是一个未知数。但有一件事是肯定的:要想让 Bernini 项目成为工程师的有用工具,工程师必须参与其中。
2. 面向工程师的生成式 CAD
Green 和 Autodesk 团队对 Bernini 项目的潜力感到兴奋,但他们也敏锐地意识到了该项目目前的局限性。首先,构成 Bernini 训练数据的 1000 万个 3D 对象全部来自公共来源,其中许多对象禁止用于商业用途。
为了将 Bernini 打造成专业工具,Autodesk 需要大量专业数据。 生成式 AI 模型与行业无关,但 Autodesk 最终希望将其整合到工业软件中。 为了获取 Bernini 的工程数据,开发人员需要与其工程客户合作。
“这是一个挑战,”格林说,“因为很少有公司能够汇总所需数量的数据。”
另一个挑战是 Bernini 的界面。上面截图中的版本过于简单,没有提示记忆。它包括一个基本的体素编辑器,但设计师会想使用它吗?Autodesk 不知道。生成式 AI 如何融入 CAD 工作流程的问题仍悬而未决。
“在模型开发的同时,我们也在进行大量的用户体验/用户界面研究,”格林说。
Bernini 项目的体素输入界面。
Bernini 的一大优势是其本身具有可扩展性。Autodesk 高级首席 AI 研究科学家兼高级经理 Hooman Shayani 将 Bernini 比作“3D 形状的 JPEG”,因为它压缩了 3D 训练数据。
Shayani 告诉 Engineering.com:“这种压缩让我们能够降低存储数据的成本和训练模型的成本。”最终,这将使最终用户能够高效地使用自己的数据训练 Bernini,并创建自定义 AI 模型,而无需支付过高的计算成本。
3. 什么时候可以使用Bernini ?
Bernini 项目并非独一无二的努力。它是 Autodesk 和其他公司的研究人员正在开发的几种 3D 生成式 AI 模型之一。当生成式 3D 进入 Autodesk Inventor 或 Fusion(以前称为 Fusion 360)等 CAD 软件时,您不会知道或关心它是基于 Bernini 还是其他模型。
但什么时候才会实现呢?格林预计, Autodesk 需要几年时间才能开发出最佳的生成式 AI 模型、训练集和用户体验,从而将 3D 几何体生成功能集成到其软件中。
然而,用户可能会更早地获得一些生成式 CAD 的成果。“我们确实拥有与产品相关的 AI 功能,将在今年晚些时候推出,”Green 表示,但他拒绝透露更多细节。
自从 ChatGPT 引发了人们对生成式 AI 的极大兴趣后,3D 设计师们就一直在等待这项强大技术登陆他们的国家。 生成式 CAD 现已初露锋芒, 您能感受到这 股风潮吗?