斯坦福研究警告:AI 检测器歧视非母语者,超半数托福作文被误判
斯坦福大学团队在《Patterns》发表研究,测试 7 款热门 AI 检测器发现,超半数非母语者的托福作文被误判为 AI 生成,其中一款误判率达 98%。检测器因词汇简单且困惑度低而误判,这种偏见反而倒逼非母语者用 ChatGPT 润色自证清白。

如果你英语不是母语,老老实实花几个小时写完一篇作业或求职信,最后却被老师或 HR 用的 AI 检测器扣上一顶「作弊」的帽子,会有多憋屈?
这还真不是个案。斯坦福大学助理教授 James Zou 带领的研究团队在期刊《Patterns》上发表了一项研究,测试了市面上 7 款主流的 GPT 检测工具,结果发现这些工具对非母语写作者存在严重的系统性歧视。
托福作文被判 AI,初二学生却没事
研究团队拿了 91 篇专门针对非母语者的托福(TOEFL)考试作文,扔进这 7 款检测软件里跑了一遍。
结果让人大跌眼镜:超过半数的托福作文被系统标记为「AI 生成」。更夸张的是,其中一款检测工具把整整 98% 的托福作文都当成了 AI 的杰作。
但当研究人员把美国本土初二学生写的作文扔进去时,画风完全变了。同样的检测工具,把超过 90% 的母语学生作文准确识别为人类所写。
很多检测软件对外宣传自己有 99% 的准确率,研究人员直言,这种宣传往好了说也是具有严重误导性的。
词汇量不够,算法就觉得你不是人
为什么非母语者会平白无故挨这记闷棍?问题出在检测器的工作原理上。
这些程序主要依赖一个叫「文本困惑度」(text perplexity)的指标。简单来说,就是看 AI 模型在预测下一个词时有多「意外」。如果下一个词特别好猜,困惑度就低;如果词用得出人意料,困惑度就高。
像 ChatGPT 这类大模型,训练目标就是生成低困惑度的顺畅文本。但不巧的是,非英语母语者写东西时,通常词汇量有限,习惯用最常见、最稳妥的词和固定句式。在算法眼里,这种规整甚至略显平淡的表达,跟 AI 吐出来的字几乎一模一样。
更有讽刺意味的还在后面。研究团队把那些被误判的托福作文交给 ChatGPT,让它用更高级、更复杂的词汇润色重写了一遍。
当这批真正由 AI 润色过的文章再次送检时,检测器居然全部给打了绿灯,认定它们百分之百出自人类之手。这直接导向了一个荒诞的现实:为了证明自己是真人,非母语者反而得先去求助 AI。
为什么重要
在学校和职场里,这类 AI 检测器正在被当成判定学术不端或诚信问题的铁证。对留学生或跨国求职者来说,哪怕你一个字母一个字母敲完全文,只要语言习惯偏保守,就可能平白无故背上作弊的罪名,甚至断送学业和职业前程。
我们认为,靠检测算法来防 AI 作弊,从底层逻辑上就是一条死胡同。检测器把「语言熟练度」和「真人属性」粗暴地画上等号,本质上是在用算法放大既有的语言壁垒。
塞浦路斯开放大学的研究者 Jahna Otterbacher 点得很透,ChatGPT 每天都在学习怎么讨好人类,它随时能学会如何骗过检测器,用 AI 打败 AI 注定是一场赢不了的军备竞赛。
看起来,学校和企业如果继续迷信这套所谓 99% 准确率的工具,不仅抓不到真正用 AI 摸鱼的高手,反而会精准误伤最认真、最努力的那批非母语普通人。
来源 (1)
- theguardian.com(在新标签页打开)原文theguardian.com
话题追踪ChatGPT 对高等教育的影响
- 斯坦福研究警告:AI 检测器歧视非母语者,超半数托福作文被误判本条
- 误信 ChatGPT 能测代写:德州一教授给大半个班打了零分
- 大学课堂强制用 AI 写作业:协同修改比直接甩提示词好得多
- 防范学生用 ChatGPT 代写论文,美国多所大学紧急重构教学
- ChatGPT 引动作弊担忧:英国高校被敦促改革考核机制