NVIDIA 亮相 SIGGRAPH:发布 40 亿参数端侧世界模型与 AI 视频检测工具
NVIDIA 在 SIGGRAPH 发布 40 亿参数的开源端侧世界模型 Cosmos 3 Edge,并推出用于逐帧识别 AI 生成视频的 NIM 微服务。同时,NVIDIA 推动 Adobe、Blender 等创意工具接入 MCP 协议,让本地智能体直接接管复杂制作管线。
Cosmos 3 Edge 是 NVIDIA 在 7 月 20 日 SIGGRAPH 上发布的开源端侧物理世界模型,参数量为 40 亿,专门用来在本地设备上实时运行具身智能与物理推演。伴随它一同亮相的,还有逐帧检测 AI 生成内容的 Synthetic Video Detector NIM 微服务,以及让本地智能体接管 Adobe、Blender 工作流的 MCP 协议集成。
它能做什么
Cosmos 3 Edge 把原本笨重的世界基础模型压缩到了 40 亿参数,能直接在边缘硬件或单张显卡上本地运行,为人形机器人、机械夹爪和自动驾驶小车提供实时的物理理解和动作预测。
配合发布的 Cosmos-Dreams 闭环模拟器更加夸张,输入一张静态图片,就能在单张 NVIDIA RTX PRO 6000 上实时生成一整套逼真的驾驶模拟世界,供自动驾驶系统在下地测试前跑验证。
针对假视频泛滥,NVIDIA 还拿出了 Synthetic Video Detector NIM 微服务。它按帧对视频进行真伪打分,在 RTX 系统上处理 1080p 画面只要 22 毫秒,在 L40 GPU 上大约 30 毫秒。
抗压缩是它的强项。官方测试显示,该模型在无压缩视频上的检测准确率为 92%,即使被社交平台暴力压缩 15% 或 50%,准确率依然能维持在 87% 和 82%。
怎么接入与落地
Cosmos 3 在底层采用了混合 Transformer 架构,目标是用单一骨干网络打通世界理解、预测与动作执行,帮形态各异的机器人建立一套统一的物理词表。
对于创作者和开发者,NVIDIA 拿出了 NVIDIA Agent Toolkit,全面支持 Model Context Protocol(MCP)。智能体不需要把数据传到云端,在本地 RTX PRO 或 DGX 设备上就能直接调取生产工具。
目前 Adobe 已经为 Express 推出了开发者 MCP 服务器,Blender Lab 提供了能直接操作 Blender Python API 的轻量级 MCP 接口,Unreal Engine 与 SideFX Houdini 也开放了 MCP 支持,允许 AI 助手读取场景树、自动排查丢材质、编写 APEX 绑定脚本。
为什么重要
对于从事机器人、自动驾驶和边缘计算的开发者来说,Cosmos 3 Edge 是目前少见能跑在本地的轻量级开源世界模型。如果你的项目需要脱网运行,或者受限于通信延迟无法使用云端大模型,它绝对值得立刻下载测试。
我们认为,NVIDIA 这次最聪明的地方在于把物理世界模型与 MCP 生产力工具捆绑落地。它没有止步于云端生成酷炫的 demo,而是把推理能力压到了本地工作站和边缘设备,既保护了工作室的数据隐私,又给昂贵的专业显卡找到了不可替代的刚需场景。
来源 (1)
- blogs.nvidia.com(在新标签页打开)原文blogs.nvidia.com