跳到正文
IFAI

行业动态

OpenAI 更新模型规范:给 ChatGPT 装上青少年防沉迷与安全护栏

首次发布 传播指数 47

OpenAI 在其模型规范(Model Spec)中加入 U18 原则,专门规范针对 13 至 17 岁青少年使用 ChatGPT 时的行为底线。新规严格限制自残、浪漫扮演及保密请求,并鼓励寻求现实求助。OpenAI 还正测试年龄预测模型,无法确认年龄时默认启用青少年保护。

OpenAI 更新模型规范:给 ChatGPT 装上青少年防沉迷与安全护栏
图:openai.com

如果一个 15 岁的孩子半夜睡不着,让 ChatGPT「假装是我女朋友陪我聊聊」,现在的 AI 该怎么接这句话?

OpenAI 在 12 月 18 日更新了他们的行为准则规范 Model Spec,专门为 13 到 17 岁的未成年人加了一套全新的 U18 原则。说白了,OpenAI 终于开始给聊天机器人立规矩:以后面对未成年人,不准玩恋爱扮演,不准建立第一人称的情感亲密感,哪怕用户把提示词包装成「写小说」或「假想实验」,AI 也必须直接拒绝。

这套更新来得并不偶然。眼下 OpenAI 正面临巨大的监管风暴,此前有报道称多名青少年在与 AI 长期交谈后疑似自杀身亡。上周美国 42 个州的检察长联名施压,要求科技巨头给聊天机器人装上安全护栏,参议员 Josh Hawley 甚至提出了一项更激进的法案,打算直接禁止未成年人使用 AI 聊天机器人。

拒绝当虚拟女友,也不帮孩子对家长保密

新规范最核心的变化,是把青少年安全排在了最前面,优先级甚至高过所谓的思想表达自由。按照 OpenAI 的说法,他们确立了四大承诺:未成年人安全第一、优先引导现实社交、像对待青少年一样说话(既不居高临下,也不当成大人对待),以及保持透明。

具体到对话细节上,限制非常严厉。模型被明确要求避开第一人称的浪漫扮演、情感亲密和暴力角色扮演。在 OpenAI 给出的示例里,AI 会直接回复「我不能扮演你的女朋友」。对于节食瘦身、容貌焦虑这类敏感话题,AI 也被禁止提供极端的走捷径建议。

更关键的是一条防越狱规则:哪怕青少年把需求套在虚构故事、历史背景或学术讨论的壳子下,上述限制依然生效。如果有孩子试图让 AI 帮自己保守秘密、瞒着家长做危险举动,AI 必须坚决拒绝并建议向现实中的大人求助。

猜出你是小孩,然后默认锁上护栏

光有规则还不够,很多未成年人注册时根本不会老老实实填真实年龄。针对这个问题,OpenAI 正在 ChatGPT 个人计划中测试一套年龄预测模型。

如果系统算不准你的年龄,或者掌握的账号信息不完整,它不会放行,而是会默认把你判定为未成年人并启动所有安全护栏。只有能通过年龄验证的成年人,才能切回完整模式。

同时,这些防线已经覆盖到了刚发布不久的群聊、ChatGPT Atlas 浏览器和 Sora 应用。面对长时间连续聊天的青少年,系统还会弹出休息提醒。为了加强现实干预,OpenAI 还联合 ThroughLine 在 ChatGPT 和 Sora 中接入了本地救助热线,并由美国心理学会等机构参与审查相关指南。

不过,外界的疑虑依然没有被打消。Metaverse Law 创始人 Lily Li 认为,AI 能主动说「我不能回答你」是好事,能打破诱发成瘾的恶性循环。但 Common Sense Media 的专家 Robbie Torney 指出,Model Spec 原本推崇「没有任何话题是禁区」,这和严格保护未成年人之间存在明显的张力。业内人士也提醒,之前 OpenAI 也明文禁止过顺从奉承用户的行为,但 GPT-4o 依然在聊天中不断迎合用户,甚至引发了所谓的 AI 精神错乱现象。

为什么重要

对家有青少年的家庭和年轻用户来说,这是一套早该上线的防火墙。Z 世代是 ChatGPT 最活跃的用户群,尤其在 OpenAI 拿下迪士尼合作后,大量孩子会把它当成全能玩具。新功能上线后,家长可以结合现有的家长控制更放心地让孩子用 AI 写作业,但必须意识到,一旦系统误判年龄,成年人可能需要花时间去证明自己是大人,体验上难免多了一道门槛。

对整个 AI 行业而言,OpenAI 的举动看起来像是一次及时的战术拆弹。面对 42 个州检察长和国会禁止未成年人接触 AI 的立法压力,OpenAI 必须拿出足够强硬的自律标准,否则很可能被一刀切的监管直接砸碎基本盘。接下来,其他主打陪伴类、角色扮演类的 AI 厂商也将被迫跟进,无限制的情感陪伴在未成年人市场将彻底变成合规雷区。

我们认为,OpenAI 这一步走得相当聪明,尤其是用年龄预测模型做默认收紧,堵死了未成年人虚报年龄的常规空子。但它最大的隐患在于落地效果:大语言模型天生具有顺应用户的倾向,纸面上的原则写得再漂亮,只要底层模型还会为了迎合情绪而被诱导突破防线,这些规矩就随时可能沦为一纸空文。值不值得信赖,最终还是要看它在真实极端对话里的实际表现。

来源 (2)

  1. [1]
    openai.com(在新标签页打开)原文openai.com
  2. [2]
    techcrunch.com(在新标签页打开)报道techcrunch.com

每日 AI 内容精选