OpenAI 拿 GPT-4 做审核:把新规则上线周期缩短到几小时
OpenAI 提出用 GPT-4 辅助内容审核的新方案。审核专家把规则写进提示词让模型打标签,再通过比对分歧快速调整策略。OpenAI 称该流程已在部分客户中落地,能将新规生效时间缩减至数小时,不过仍需人工持续介入校准。

内容审核向来是互联网行业里最折磨人的苦差事,每天海量的恶性言论不仅压垮审核员,也让平台规则常常滞后数周。
OpenAI 在官方博客公布了一套新方案,宣布要用当家模型 GPT-4 来扛起内容审核的重担。
按照 OpenAI 的说法,这套流程已经有部分企业客户用上了,能把一套全新审核政策从起草到落地的时间直接缩短到几个小时。
让人和 AI 互相找茬
这套机制的核心不是直接把审核权力扔给 AI,而是让政策专家和 GPT-4 反复对账。
专家先用自然语言写好审核规则,比如禁止提供制造武器的步骤,并准备一批合规与违规的测试样本。
随后,专家先自己给样本打标签,再把去掉标签的原文喂给 GPT-4,观察模型判断得准不准。
如果两边意见打架,专家会让 GPT-4 解释背后的推导逻辑,借此找出规则定义里的模糊地带,进而把政策条款修得更严密。
OpenAI 甚至在文中公开叫板 Anthropic,直言对方依靠模型内部固有判断的做法太僵化,不如自己这种针对具体平台的敏捷迭代模式灵活。
历史老毛病依然在
用 AI 搞审核其实不是什么新鲜发明,行业里早就挤满了玩家。
Google 旗下 Jigsaw 团队维护的 Perspective 很多年前就已公开提供服务,此外还有 Spectrum Labs、Hive、Cinder,以及最近被 Reddit 收入囊中的 Oterlu 等一众初创团队。
问题在于,AI 审核在历史上的表现并不光彩。
宾夕法尼亚州立大学过去的一项研究发现,常见的情感分析和毒性检测模型,往往容易把涉及残障人士的正常帖子错判为负面或有毒内容。
早期的 Perspective 也经常翻车,既认不出部分群体自嘲用的回收污名词,也搞不定故意漏字母的拼写变体。
这些漏洞追根究底在于人类标注员自身带有偏见,例如非裔与 LGBTQ+ 群体在打标签时的标准往往就与其他人存在差异。
面对这种痼疾,OpenAI 承认 GPT-4 同样可能在训练阶段继承潜在偏见,因此必须始终保留人工在环监督,不能完全放养。
为什么重要
对运营社区的开发者和企业来说,这套机制最大的价值不是全自动删帖,而是拿大模型当规则压力测试器。
以前修改一条违规细则,要经历写规范、培训外包团队、跑小样本抽检的漫长循环,现在几个小时就能在 GPT-4 身上跑完一轮逻辑自洽性检验,试错成本大幅降低。
对行业而言,OpenAI 正试图把传统严重依赖密集人力的标注审核,重新包装成高附加值的 Prompt 工程,这很可能会对传统 BPO 审核外包行业带来冲击。
我们认为 OpenAI 聪明的地方在于承认了规则没有完美解,转而把大模型当作帮人类发现定义漏洞的工具人,而不是盲目吹嘘百分百命中。
但隐患依然显而易见,看起来 GPT-4 能够给出头头是道的违规解释,可一旦底层的训练偏见与专家的思维盲区发生重叠,AI 就会以极具说服力的语气输出荒谬判定,最终伤害的还是真实用户的表达空间。
来源 (1)
- techcrunch.com(在新标签页打开)原文techcrunch.com