Cloudflare CEO 稱使用者不再點 AI 來源連結:OpenAI 抓 1500 頁才引流 1 人
據 Axios 報道,Cloudflare CEO 透露使用者極少再點選 AI 機器人的引用連結,導致出版商引流雪崩。OpenAI 如今爬取 1500 頁才為網站帶去 1 個訪客,Anthropic 更是 6 萬比 1。Cloudflare 正研發新工具,攔截那些無視禁爬指令的 AI 爬蟲。

AI 聊天機器人每次回答完問題,底下都會規規矩矩地附上幾個網頁連結。開發商總拿這個當擋箭牌,意思是「看,我們可沒白拿內容,還幫你們導流了呢」。
但真實情況究竟如何?Cloudflare 執行長 Matthew Prince 最近接受 Axios 採訪時,直接把這塊遮羞布給扯了下來:根本沒人點那些連結。
流量斷崖:從兩個人看一篇,到六萬篇換一個人
Prince 給出了一組相當驚人的資料。十年前,Google 每抓取兩個網頁,就能給網站送去一位訪客。六個月前,這個比例變成了抓六篇來一個人;而到了現在,Google 抓十八篇才來一個人。
但這還算好的,AI 公司的數字才叫真正的斷崖式崩塌。
六個月前,OpenAI 每抓取 250 個頁面,能給出版商回饋一位訪客。現在,這個數字變成了 1500 篇換一位訪客。
Anthropic 就更誇張了。六個月前是抓 6000 篇帶一個訪客,現在直接跌到了 60000 篇才給一個訪客。
說白了,過去這幾個月裡,大家越來越信任 AI 的總結,看完摘要就直接關掉,根本沒人會去點下面的參考來源。對靠網頁廣告養活團隊的出版商來說,這無異於滅頂之災。
既然不守規矩,那就請君入甕
更讓出版商憋屈的是,很多 AI 爬蟲根本不管什麼網路禮儀。早在去年就有報道爆出,多家 AI 公司完全無視網站的 robots.txt 協議,就算網頁標明瞭「禁止抓取」,對方也是照抄不誤。
Prince 表示,Cloudflare 正在開發專門的工具,哪怕網頁已經寫了禁止抓取指令,也要強行把這幫硬闖的爬蟲擋在門外。
其實他們從去年就在琢磨怎麼對付爬蟲。今年 3 月,Cloudflare 就上線了一個叫「AI 迷宮」(AI Labyrinth)的方案。
它的思路非常損但也非常管用:如果未經許可的爬蟲硬要抓,系統就會用 AI 即時生成一堆看似逼真、實則毫無意義的網頁,把爬蟲引進去團團轉。抓了一堆假內容不說,還白白消耗了爬蟲背後的伺服器算力和時間。
Prince 在採訪裡放了句狠話:「我每天都在跟多國駭客交手,他們天天想黑進我們客戶的網站。現在你跑來跟我說,我居然搞不定帕洛阿爾托那幫開公司的書呆子?」
為什麼重要
這件事狠狠戳破了 AI 行業維持已久的利益互惠謊言。
大模型廠商一直宣稱附帶來源連結是給創作者的補償,但從 60000 篇換 1 個點選的慘淡現實來看,這種所謂的「導流補償」在商業上已經徹底名存亡實。
對於內容創作者和獨立媒體來說,指望 AI 給你送流量完全是天方夜譚。如果你的商業模式嚴重依賴展示廣告和頁面 PV,現在就必須考慮轉型,比如轉向付費訂閱、私域社群,或者主動封鎖抓取。
而 Cloudflare 的做法在我們看來非常聰明。它不再寄希望於 AI 公司遵守道德自律,而是直接在網路基礎設施層把內容武裝起來,甚至用 AI 去消耗 AI。這一步看起來會逼得 AI 公司不得不坐回談判桌,真正掏出真金白銀來買內容版權,而不是用虛無縹緲的點選率來畫餅。
來源 (1)
- engadget.com(在新分頁開啟)原文engadget.com