跳到正文
IFAI

AIGC

Sora 上线 Cameo 限制功能:能自定义禁令,防止形象被滥用

首次发布 传播指数 43

OpenAI 的 Bill Peebles 宣布 Sora 推出 Cameo 权限控制。用户公开自身形象时,能用自然语言设置限制指令,比如禁止涉足政治评论或说特定词汇。团队还在改进水印可见度,并修复了注销 Sora 会连带注销 ChatGPT 账号的 bug。

把自己的脸授权给全世界网友做视频,结果一觉醒来,发现自己成了政论节目主播,或者正在说脏话。这种让很多普通人和创作者头疼的事,OpenAI 终于开始打补丁了。

上线短短几天,处于邀请制阶段的 Sora 迅速冲上了 App Store 榜单前列。除了生成逼真的视频,Sora 最让人上瘾也最危险的功能是 Cameo。用户只要上传自己的生物特征数据,就能把自己的数字分身塞进各种 AI 视频里,甚至开放给其他人随意调用。

不过,玩火很快带来了麻烦。不仅很多普通用户担心自己的脸被滥用,网上还迅速涌现出大量让皮卡丘、海绵宝宝跟 OpenAI 首席执行官 Sam Altman 的深度伪造分身互动的视频,甚至借这些角色的嘴嘲弄 OpenAI 的版权政策。

面对失控的风险,OpenAI 负责人 Bill Peebles 和 CEO Sam Altman 先后发声,一口气推出了多项限制功能与安全调整。

先给分身立规矩,再把版权开关收回来

针对个人数字分身,Bill Peebles 宣布正式上线 Cameo 限制功能。用户进入 Cameo 设置的偏好限制后,可以直接用自然语言给自己的数字分身立规矩。

比如你可以输入「不要把我放进任何涉及政治评论的视频里」,或者「禁止让我说某些脏话或特定词汇」。Bill Peebles 表示,后续还会上线更多维度的控制手段,让大家既能分享形象,又不必交出灵魂。

另一个更大的转向发生在版权上。据《华尔街日报》此前的报道,OpenAI 在发布前曾通知好莱坞制片厂,如果不希望自家 IP 被 Sora 用户生成,必须主动申请退出。

但现在 Altman 发文改口了。Sora 准备转向细粒度的「自愿加入」(opt-in)模式。也就是说,除非制片厂或版权方明确点头授权,否则用户未来将无法随意用受保护的角色生成视频。

Altman 承认这就像一种「互动式同人小说」,很多版权方其实很兴奋,但前提是必须能自主决定角色怎么用,包括彻底禁止生成。当然,他也坦承新技术初期总会有漏网之鱼。

浮水印更显眼,顺便把账号解绑了

除了版权和肖像权的大调头,Sora 还在修补一系列体验上的漏洞。

Bill Peebles 提到,官方正在重新设计视频水印,接下来的水印会更加清晰、显眼,防止生成的视频在社交网络上被当成真事传播。

在模型审核方面,OpenAI 正在调整安全技术栈,目标是堵住那些能绕过安全检查的提示词漏洞,同时尽量减少误伤。Peebles 直言团队知道过度审核很让人抓狂,但在全世界还在适应这种技术的阶段,保持保守是必要的。

此外还有一个颇具戏剧性的修复:此前有用户发现,如果你想注销 Sora 账号,系统竟然会强制连带注销你的 ChatGPT 账号。OpenAI 这次终于把两个账号的注销逻辑拆开了。

至于怎么赚钱,Altman 也松了口。除了原定在高需求时段向用户收费外,OpenAI 已经在考虑商业变现,并暗示可能会把生成视频获得的收入跟版权方进行分成。

为什么重要

对于想尝鲜的普通用户和内容创作者来说,这次更新终于给真人出镜留了一条安全底线。此前谁也不敢轻易开放 Cameo,生怕第二天自己就成了恶搞梗图的主角。现在你能用自然语言给 AI 设红线,才算真正迈出了个性化 AI 形象商用或社交化的第一步。

对于好莱坞和整个内容产业而言,OpenAI 从「不服就退」到「求你加入」的态度转变,说明生成式视频在版权大棒面前没有特权。如果未来真能跑通互动同人与收入分成的模式,影视公司可能会从把 AI 当作侵权仇敌,转向把 AI 当成新的变现衍生渠道。

我们认为,OpenAI 这一连串动作看起来手忙脚乱,但反应算得上极其迅速。视频生成越逼真、生成门槛越低,版权和肖像侵权的法律反噬就越猛烈。给 Cameo 下指令和引入版权分成是很聪明的退让,不过真正的隐患依然在执行层面:用自然语言限制分身发言能否百分之百防住越狱提示词,漏网之鱼出现时平台该负多大责任,依然是悬在 Sora 头上的达摩克利斯之剑。

来源 (2)

  1. [1]
    @billpeeb(在新标签页打开)原文x.com
  2. [2]
    techcrunch.com(在新标签页打开)报道techcrunch.com

每日 AI 内容精选