Niantic 8th Wall 接入生成式 AI:把 ChatGPT、DALL-E 与 NPC 搬进网页 AR
本周,Niantic 为其 WebAR 平台 8th Wall 推出生成式 AI 工具模块,集成了 Inworld AI 与 OpenAI。开发者可直接在网页 AR 中加入交互式 AI 角色,或利用 DALL-E 生成 3D 物品纹理贴图。官方还同步放出了两个示例项目。

过去做网页 AR,开发者最头疼的就是内容太死板。模型做好了放在那里,用户点一下动一下,玩两分钟就失去了新鲜感。
本周 Niantic 决定给自家的 8th Wall 平台补上这块短板。他们正式上线了一套生成式 AI 开发者工具,专门用来把生成式 AI 塞进 WebAR 项目里。
这次 Niantic 没有自己从头训练大模型,而是直接做了现成的接口封装,一口气打包了两个最受关注的合作方:Inworld AI 和 OpenAI。
把 NPC 和画图工具搬进网页 AR
对 8th Wall 上的开发者来说,这两套模块解决的是接入成本的问题。Niantic 表示,模块能直接消除把 AI 搬到 WebAR 时的各种开发开销,不用再去手动处理繁琐的后台逻辑。
第一套是 Inworld AI 集成模块。它的作用是在 AR 场景里放进能自然对话的智能角色。无论是游戏 NPC 还是品牌的虚拟代言人,都能在 AR 场景下跟用户直接开口聊天。
第二套是 OpenAI 的集成模块。开发者可以顺畅调取 ChatGPT 和 DALL-E 的能力,让用户在网页端查看 AR 画面时,直接通过提示词生成虚拟物品或材质。
为了展示怎么用,Niantic 还放出了两个现成项目。一个是叫 Rainbow Crunchies 的演示,里面住着一个由 Inworld AI 生成的角色 Rainbow Ray,它是个虚构的麦片品牌吉祥物,开发者能直接测试跟它的人机互动。
另一个示例项目则由 8th Wall 的 XR 开发者 Ian Curtis 启发。在这个项目里,用户可以用 DALL-E 即时生成一张新材质,然后直接糊在 AR 物体的表面上。Ian Curtis 觉得,生成式 AI 能让每个普通人变成数字世界的建筑师,不再只是被动看着固定好的模型。
为什么重要
对于 WebAR 开发者和品牌营销团队来说,这是个相当实用的更新。以往做轻量级营销互动,往往受制于网页端资源包大小和算力,很难做出有深度的交互。现在不用下 App、只扫个二维码,用户就能在手机浏览器里和一个有特定设定的智能吉祥物聊上几句,或者自己生成专属皮肤,互动的趣味性和停留时间会明显拉长。
对整个行业而言,Niantic 这步棋下得很现实。8th Wall 作为主打网页端轻量体验的平台,本身不具备自研尖端大模型的体量。直接扮演连接器的角色,把 Inworld 和 OpenAI 这类成熟工具做成现成积木,既稳固了自己在 WebAR 领域的护城河,也降低了开发者的试错成本。
不过在我们看来,这类方案目前仍有隐患。让终端用户直接用文本生成 3D 贴图或者与 AI 角色无限制互动,很难彻底避免内容翻车,响应延迟和模型调用的 API 账单也是开发者必须承担的现实成本。但总体来说,这种把外部生成式 AI 无缝植入浏览器的打法,显然比让开发者从零造轮子聪明得多。
来源 (2)
- venturebeat.com(在新标签页打开)原文venturebeat.com
- adweek.com(在新标签页打开)报道adweek.com