OpenAI 拿 GPT-4 做稽核:把新規則上線週期縮短到幾小時
OpenAI 提出用 GPT-4 輔助內容稽核的新方案。稽核專家把規則寫進提示詞讓模型打標籤,再通過比對分歧快速調整策略。OpenAI 稱該流程已在部分客戶中落地,能將新規生效時間縮減至數小時,不過仍需人工持續介入校準。

內容稽核向來是網際網路行業裡最折磨人的苦差事,每天海量的惡性言論不僅壓垮稽核員,也讓平臺規則常常滯後數週。
OpenAI 在官方部落格公佈了一套新方案,宣佈要用當家模型 GPT-4 來扛起內容稽核的重擔。
按照 OpenAI 的說法,這套流程已經有部分企業客戶用上了,能把一套全新稽核政策從起草到落地的時間直接縮短到幾個小時。
讓人和 AI 互相找茬
這套機制的核心不是直接把稽核權力扔給 AI,而是讓政策專家和 GPT-4 反覆對賬。
專家先用自然語言寫好稽核規則,比如禁止提供製造武器的步驟,並準備一批合規與違規的測試樣本。
隨後,專家先自己給樣本打標籤,再把去掉標籤的原文餵給 GPT-4,觀察模型判斷得準不準。
如果兩邊意見打架,專家會讓 GPT-4 解釋背後的推導邏輯,藉此找出規則定義裡的模糊地帶,進而把政策條款修得更嚴密。
OpenAI 甚至在文中公開叫板 Anthropic,直言對方依靠模型內部固有判斷的做法太僵化,不如自己這種針對具體平臺的敏捷迭代模式靈活。
歷史老毛病依然在
用 AI 搞稽核其實不是什麼新鮮發明,行業裡早就擠滿了玩家。
Google 旗下 Jigsaw 團隊維護的 Perspective 很多年前就已公開提供服務,此外還有 Spectrum Labs、Hive、Cinder,以及最近被 Reddit 收入囊中的 Oterlu 等一眾初創團隊。
問題在於,AI 稽核在歷史上的表現並不光彩。
賓夕法尼亞州立大學過去的一項研究發現,常見的情感分析和毒性檢測模型,往往容易把涉及殘障人士的正常帖子錯判為負面或有毒內容。
早期的 Perspective 也經常翻車,既認不出部分群體自嘲用的回收汙名詞,也搞不定故意漏字母的拼寫變體。
這些漏洞追根究底在於人類標註員自身帶有偏見,例如非裔與 LGBTQ+ 群體在打標籤時的標準往往就與其他人存在差異。
面對這種痼疾,OpenAI 承認 GPT-4 同樣可能在訓練階段繼承潛在偏見,因此必須始終保留人工在環監督,不能完全放養。
為什麼重要
對運營社群的開發者和企業來說,這套機制最大的價值不是全自動刪帖,而是拿大模型當規則壓力測試器。
以前修改一條違規細則,要經歷寫規範、培訓外包團隊、跑小樣本抽檢的漫長迴圈,現在幾個小時就能在 GPT-4 身上跑完一輪邏輯自洽性檢驗,試錯成本大幅降低。
對行業而言,OpenAI 正試圖把傳統嚴重依賴密集人力的標註稽核,重新包裝成高附加值的 Prompt 工程,這很可能會對傳統 BPO 稽核外包行業帶來衝擊。
我們認為 OpenAI 聰明的地方在於承認了規則沒有完美解,轉而把大模型當作幫人類發現定義漏洞的工具人,而不是盲目吹噓百分百命中。
但隱患依然顯而易見,看起來 GPT-4 能夠給出頭頭是道的違規解釋,可一旦底層的訓練偏見與專家的思維盲區發生重疊,AI 就會以極具說服力的語氣輸出荒謬判定,最終傷害的還是真實使用者的表達空間。
來源 (1)
- techcrunch.com(在新分頁開啟)原文techcrunch.com