跳到正文
IFAI

AIGC

ACTx486 互动媒体演示:看播客能随时打断提问,画面主角当场回应

首次发布 传播指数 41

研究者公布互动媒体演示 ACTx486,能把现成播客视频变成可交互内容。观众轻点画面即可打断提问、切换语言或插入 3D 物体,画面中的嘉宾会依据公开记录生成回应,随后无缝接回原片。不过目前单次交互生成需数分钟,公开演示均为提前预渲染。

ACTx486 互动媒体演示:看播客能随时打断提问,画面主角当场回应
图:actx486.com

平时在手机上看长视频,体验基本是单向的:遇到听不懂的黑话,你只能按暂停去搜;想追问一句「这事跟我有什么关系」,屏幕对面的人也不会理你。

研究者公布了一个叫 ACTx486 的互动媒体研究演示。它的思路很简单,但也足够大胆:把一段现成的播客录像,变成一个能听懂你说话、能当场回应、还能随时接回原片的新媒体。

随时打断,画面里的主角转头回答你

演示选了一期极其抓人眼球的现成播客,画面里坐着两位大众极熟悉的面孔,包括马斯克和乔·罗根。测试观众坐在沙发上用手机看视频,中途随时轻点屏幕就能插话。

比如问喷火器怎么工作,画面里的嘉宾就会转过头来解释,系统还会根据对话实时生成图表;让马斯克把星舰拿出来拆开讲,画面里就真的会加入一个能 3D 旋转的模型,之后即便继续提别的问题,模型也会老老实实留在原地。

你还可以要求他们切换语言,两位主持人能各自用不同的语种回应,但音色和神态完全保留;甚至只要打开前置摄像头,系统就能把观众自己的画面直接加到演播室现场。

更有意思的是连贯性。你的每一轮互动都会被保留,包括场景里添加的衣服、道具和语言,直到这一段支线彻底结束,画面才会丝滑地切回原本录制好的正片,双方视线、节奏和音效都尽量做到原汁原味。

效果惊艳,但现在还做不到实时

不过,要做到这一切,目前代价相当大。

团队坦承,现在的 ACTx486 还是「真正的生成,而非实时生成」。系统背后需要完成信息路由、实时查资料、撰写回答并重新渲染整段视频,完整生成一次交互需要好几分钟。因此目前展示的所有 demo,其实都是提前预渲染好的成品。

团队给出的理想延迟是 6 秒以内,但他们承认目前离这个目标还有相当距离,正在尝试不同的工程架构。

另外,因为直接用了名人的肖像和声音,团队也设了严格的边界:系统只能依据嘉宾本人的公开记录来生成回答,严禁代他们表态个人或政治问题;视频上也有清晰的标记,在真实镜头和 AI 生成之间切换时会即时提醒。

为什么重要

我们认为,ACTx486 这一步走得极聪明的地方,在于它放弃了「从空白对话框开始」的聊天迷思。

生成式 AI 固然什么都能画、什么都能写,但把决定权全甩给用户,其实是种巨大的认知负担。ACTx486 反其道而行,拿现成视频搭好叙事框架、节奏和语境,用户只需要在感兴趣的地方充当「微导演」,体验远比面对一个冷冰冰的输入框轻松自然。

对内容行业来说,这可能是一条全新的中间路线。它既不是完全预录的死视频,也不是毫无章法的纯虚拟人直播,而是用现成素材做锚点,把原本一次性的视听内容改造成了可探索的知识空间。

当然,隐患也同样明显。生成需要几分钟的现状,意味着它眼下还无法变成大众能随意上手的日常工具;更重要的是,用知名人物的声音和长相去说没说过的话,哪怕有公开记录作依据、哪怕标明了生成标签,伦理和深度伪造的风险依然如影随形。开发团队选择把 demo 公开来探讨防护机制,也说明这道题他们自己还没彻底解开。

来源 (1)

  1. [1]
    actx486.com(在新标签页打开)原文actx486.com

每日 AI 内容精选