跳到正文
IFAI

大模型

OpenAI 暫緩釋出 ChatGPT 水印工具:能抓作弊,但容易被繞過

首次發布 傳播指數 50

據報道 OpenAI 已研發出能識別 ChatGPT 寫作的文本水印工具,但正謹慎評估是否釋出。該技術通過微調詞彙選擇嵌入隱形水印,雖準確度高,但極易被機器翻譯或二次改寫繞過,且可能對非英語母語者帶來汙名化風險。

OpenAI 暫緩釋出 ChatGPT 水印工具:能抓作弊,但容易被繞過
圖:techcrunch.com

老師們一直想要的「抓作弊神器」,OpenAI 其實早就做出來了,但他們現在正猶豫要不要把它公之於眾。

據《華爾街日報》報道,OpenAI 內部研發了一套可以精準識別 ChatGPT 生成內容的文本水印技術,連學生用 AI 代寫的作業都能揪出來。不過,這項工具目前被鎖在公司內部,團隊還在糾結到底要不要釋出。

OpenAI 發言人向媒體證實了這項研究的存在,並表示公司正在採取一種深思熟慮的態度。官方給出的理由很直白:這項技術牽扯的複雜因素太多,一旦放出來,會波及整個生態。

給文字加個「隱形防偽碼」

其實去年 OpenAI 就上線過一款 AI 文本檢測器,但因為誤判率太高、準確率太低,沒多久就草草下架了。

這次他們換了一條截然不同的技術路線。新方法叫文本水印,它專門針對 ChatGPT,測不了其他家的模型。

簡單來說,技術人員在 ChatGPT 生成文字、挑揀詞彙的底層邏輯上動了點手腳。它輸出的每一個詞都符合某種特定演算法規律,肉眼讀起來毫無破綻,但只要用配套工具一掃,就能立刻辨認出來。

OpenAI 在更新的博文裡提到,這種水印的準確率非常高,哪怕有人在區域性微調句子或者做簡單的同義詞替換,它依然能精準識別。

想防的人防不住,老實人先遭殃

既然效果這麼好,為什麼壓著不發?最大的問題在於,它防君子不防小人。

OpenAI 自己坦白,這種水印只要遇到全域性篡改就很容易失效。比如把生成的文字丟進翻譯軟體轉一道、用別家的生成模型重寫一遍,甚至只是在每個單詞之間加個特殊符號再刪掉,水印就被徹底洗掉了。

換句話說,真正鐵了心想作弊的人,繞過它輕而易舉。

更棘手的是道德包袱。很多非英語母語者平時會用 ChatGPT 來潤色語法和表達,如果文字被強制打上水印並被檢測出來,這些人很可能會被扣上作弊或造假的帽子,承受不公平的偏見。

為什麼重要

這件事情看起來是技術問題,實質上是 OpenAI 商業利益與社會責任的一次劇烈博弈。

如果 OpenAI 上線了這個工具,等於單方面給自家產品套上枷鎖。作弊者只要轉頭去用競品模型就能輕鬆逃避檢測,結果很可能是把使用者白白推向競爭對手,自己還落個體驗差的評價。

對於普通使用者和教育工作者來說,這也是個清醒劑。我們認為,靠技術手段一勞永逸識別 AI 文本的幻想基本破滅了,文本水印目前來看只是一張捅得破的窗戶紙。

在這個階段,不管是學校還是企業,如果還寄希望於某款官方檢測軟體來評判誠信,很可能會陷入兩難。要麼被真正的作弊高手矇混過關,要麼誤傷那些只想拿 AI 當翻譯和輔助工具的普通人。

來源 (1)

  1. [1]
    techcrunch.com(在新分頁開啟)原文techcrunch.com

每日 AI 內容精選