跳到正文
IFAI

AIGC

Stability AI 推出 3D 控制系统 Arbor:给生成加一份空间蓝图

首次发布 传播指数 41

Stability AI 发布 3D 生成控制系统 Arbor。它无需重新训练底模,创作者只需提供简单的粗略网格,就能精确指定物体的生成空间、避让留白和接触面。该模型仅 600MB 且已开源代码,配合 Trellis 使用,让 AI 生成的 3D 资产能真正嵌入实际游戏和工业管线。

Stability AI 推出 3D 控制系统 Arbor:给生成加一份空间蓝图
图:arxiv.org

用 AI 做 3D 资产,之前最让人头疼的就是「摇盲盒」。输入一段提示词,按次回车,然后双手合十祈祷模型能吐出一个能用的模型。结果往往是椅子腿悬空,或者尺寸完全塞不进游戏场景里,最后还是得美术师手动擦屁股。

打造出 Stable Diffusion 的 Stability AI 这次把刀口对准了这个痛点,正式发布了 3D 控制系统 Arbor。它的逻辑很简单:别让 AI 猜尺寸,在它开始生成之前,先给它塞一份粗略的空间蓝图。

占位、避让与接触面

Arbor 的核心在于引入了一套原生 3D 约束网格。这些网格不是精细的半成品,而是极其简单的几何外框,主要负责交代三种信息。

第一种是容纳区域,告诉模型这部分必须长出几何结构,比如椅子的座包或手柄;第二种是避让区域,强制模型留白,给角色的肢体动作或机械零件预留运动间隙;第三种是接触区域,明确指定物体哪些部位需要严丝合缝地贴合地面或连接点,比如椅腿必须精准踩在地面上。

对于做 3D 内容的人来说,用几何框表达空间需求,远比在提示词里绞尽脑汁写「离地几厘米」自然得多。这种做法直接解决了动画复用时的穿模问题。

不用重新炼丹的 600MB 挂件

把硬性空间几何塞进扩散模型,技术上其实相当棘手。很多团队的做法是重头训练底模,或者在后处理阶段强行拉扯网格,效果往往大打折扣。

Arbor 选了一条聪明的轻量化路径。它作为一个即插即用的路由附件,配合开源的 3D 生成底模 Trellis 以及 Trellis 2 一起工作。它把粗糙的约束网格转成特征标记,直接注入到冻结参数的去噪器中,整个过程根本不需要重新训练底层生成大模型。

正因为架构轻巧,Arbor 自身在 Hugging Face 上的权重模型只有 600MB 左右。官方也同步公开了代码和项目演示,开发者在本地拉取代码后就能配合底模跑起来。

为什么重要

我们认为,Arbor 的出现标志着 AI 3D 生成终于开始认真面对实际工业管线的苛刻要求了。

在此之前,不管是文本生成还是单图转 3D,生成的模型大多只能停留在概念设计或远景贴图阶段。游戏工业管线要求极高,一个道具如果不能适配预设的角色动作骨骼,或者一个零件无法精准卡进装配位,在专业美术流程里就是废品。Arbor 把控制权从抽象的词句拉回到了具体的空间体积,独立游戏开发者和 3D 设计师不用再去赌概率,生产效率会有质的提升。

从技术路径上看,Stability AI 这套「小尺寸约束适配器 + 冻结底模」的打法很务实。600MB 的体积门槛极低,没有强行要求用户升级整套硬件环境,而是无缝嵌入到现有的 Trellis 生态里。

不过,它目前依然依赖 Trellis 系列作为生成基座,最终成品的纹理细节和复杂材质依然受限于底模的表现上限。但无论如何,能让 AI 在规矩的空间框里老老实实干活,已经是 3D 生成落地走出的关键一步。

来源 (1)

  1. [1]

每日 AI 内容精选