互聯網安全與性能優化公司Cloudflare宣布一系列新政策，協助網站對抗AI爬蟲無限制抓取，並探索保障內容創作者利益的新商業模式。根據最新規定，所有新加入Cloudflare的網站域名客戶，將可選擇是否允許AI爬蟲訪問其內容，或直接進行全面封鎖。該功能將預設啟用，用戶無需手動設置。
Cloudflare指出，這項更新延續了2024年推出的免費阻擋工具，已獲包括《時代》雜誌、美聯社及康泰納仕等多家大型出版商支持與採用。執行長馬修．普林斯（Matthew Prince）表示，出版商正面臨因生成式AI替代原始鏈接點擊而導致的生存危機，強調必須重新將權力交還創作者，維護自由且充滿活力的網絡生態。
同時，Cloudflare啟動名為「按爬取付費」的封閉測試計劃。該模式允許網站對AI爬蟲收費，AI需在請求中表明支付意願方可成功獲取內容。若未支付，則將收到402付款所需回應，內含定價資訊。出版商亦可自訂對不同爬蟲的收費策略或提供免費存取。
Cloudflare表示，該模式尚處早期階段，未來將持續優化，並支持依內容類型進行動態定價及接入其他交易平台。
Cloudflare宣布一系列新服務，助網站對抗AI 爬蟲無限制抓取。（網絡圖片）
下載APP