Cloudflare 出招逼 AI 付費：9/15 起，混用型爬蟲預設被擋在有廣告的頁面外

Cloudflare 丟出一條會改寫網路內容經濟的政策。從 9 月 15 日起，平台預設會擋住那些把搜尋、agent、訓練混在一起的『混用型』爬蟲，讓它們進不了有廣告的頁面，除非站主自己改設定。這套新預設會套用在新客戶、既有客戶新開的網站，以及所有免費方案的既有客戶身上。傳統的搜尋爬蟲照樣放行，被針對的是那種一邊假裝來做搜尋、一邊把內容抓去餵模型的行為。

配套的收費機制也升級了。原本的 Pay Per Crawl 演進成 Pay Per Use，收費邏輯從『你抓了幾次』改成『你的內容替 AI 創造了多少價值』。對每一隻 AI 爬蟲，發行商可以三選一：免費放行、按次收費、或直接封鎖，Cloudflare 自己當收款方（Merchant of Record）並提供底層技術。這給了刊物一個過去沒有的籌碼，把流量被白嫖的困境變成一張可以談判的牌。

Cloudflare 的算盤是逼 AI 公司把搜尋跟訓練、agent 用途切乾淨，否則就付錢。這件事牽動的是整個內容供給鏈的權力平衡——過去 AI 公司免費爬走全網，如今守門的 CDN 站出來收過路費。對經營內容網站的人，包括 Max 手上那幾個 AI 日報與資料站，這是一個要開始盤點『我要不要收 AI 爬蟲的錢、還是繼續開放換曝光』的現實問題，9 月 15 日是個該記下來的日子。