跳到正文
IFAI

AIGC

腾讯发布 Hunyuan3D-Buffalo 1.0:生成、理解与编辑全包了

首次发布 传播指数 41

腾讯混元团队公布统一 3D 多模态框架 Hunyuan3D-Buffalo 1.0。它基于共享的 VLM 底座,单套流程就能搞定文本生成 3D、自然语言编辑、3D 问答和部件拆解。创作者不再需要拼凑多个专用工具,用一句话就能微调或拆解 3D 资产。

图:tencent-hunyuan.github.io

以往拿 AI 做 3D 资产的人,最头疼的往往不是怎么生成出来,而是生成之后怎么办。

你要么用 A 工具生成一个整体模型,发现细节不对,只能导进 Blender 一刀一刀手工改;要么想把模型的某个部件换掉,却发现整个模型是一整坨网格,根本拆不开。

腾讯混元团队最近放出的 Hunyuan3D-Buffalo 1.0,想解决的正是这个断层。他们做了一个统一的 3D 多模态框架,把 3D 的生成、理解、指令编辑和零件拆解,全部塞进了同一个系统里。

动动嘴皮子改模型,还能一键拆零件

大多数现有的 3D 工具都各管一摊,生成模型的不管理解,做编辑的又很难兼顾生成质量。Buffalo 1.0 的做法是用一个统一的底层架构把各环节打通。

它的骨干是一个叫 Hunyuan3D-VLM 的视觉语言模型,用来连接自然语言和 3D 表征,专门处理 3D 问答、空间定位和任务理解。后面再挂上 Hunyuan3D DiT 扩散模块,专门负责出高精度的 3D 资产。

在实际演示中,这种指令式编辑显得很直观。比如给它一个现成模型,输入一句指令把头变成牛头,模型头部的网格和贴图就会按提示替换,而身体其他部位保持原样。

你还可以对它说移除船帆,它就能精准识别出船帆所在的部件并直接删掉。又或者给一只青蛙戴上眼镜,给机器人的两只手同时装上带尖刺的护手。

更有意思的是它的部件级拆解能力。你可以通过文字语义把任意一个 3D 模型拆成独立的零部件,在界面里既能看完整拼装效果,也能一键炸开成各个零件散落的爆炸图。

为什么重要

在我们看来,Buffalo 1.0 踩中了 3D 生成领域最迫切的痛点:可控性与可用性。

对游戏美术、独立开发者或 3D 打印玩家来说,以前 AI 生成的 3D 模型往往是观赏性大于实用性,一旦某处变形就得全盘推倒重来。如果真能通过自然语言定向修改局部、甚至直接拆分出零件,AI 3D 资产才算真正跨进了实际生产管线。

从行业角度看,3D 赛道的竞争已经从比拼谁生成的网格更精致,转向了端到端的工程化闭环。腾讯把生成、编辑与理解整合到同一个 VLM 加 DiT 的管线里,看起来是在逼对手放弃单点修补的工具形态,向全流程多模态平台靠拢。

这种统一架构也并非没有潜在代价。多任务强行塞进同一个底座,对上下文理解和空间定位精度的要求极高。如果语言指令理解稍有偏差,局部修改就容易误伤相邻网格,或者把不该拆的部位切断。官方已经在项目主页注明即将开源代码和权重,实际工程表现到底能不能扛住复杂工业模型的考验,还得等代码释出后见分晓。

来源 (1)

  1. [1]
    tencent-hunyuan.github.io(在新标签页打开)原文tencent-hunyuan.github.io

每日 AI 内容精选