選項
首頁
新聞
Cloudflare 推出新的批量封鎖規則,鎖定混合型 AI 爬蟲

Cloudflare 推出新的批量封鎖規則,鎖定混合型 AI 爬蟲

2026-08-06
93

Cloudflare 推出新的批量封鎖規則,鎖定混合型 AI 爬蟲

Cloudflare 已針對其預設服務規則推出重大更新,並給予全產業的 AI 企業至 9 月 15 日為止的期限以符合規範。 所有 AI 供應商現須區分搜尋爬蟲、模型訓練爬蟲及 AI 代理專用爬蟲。任何未能明確區分自身類型的混合爬蟲,在嘗試存取包含廣告的網頁時,將被系統自動封鎖。

新規則的適用範圍廣泛,無論是新平台客戶、建立新網站的現有用戶,還是所有免費用戶的網站,均一視同仁。若網站管理員希望允許混合型爬蟲,唯一的方法是手動調整後端設定——此項變更將直接影響 AI 公司收集網路內容作為訓練資料的方式。

許多網站管理員樂於允許傳統搜尋引擎索引其內容,但不希望自己的智慧財產權被無償採集並用於訓練。 Cloudflare 指出,Google 的爬蟲同時兼具搜尋與 AI 資料蒐集雙重目的,這使得網站難以在允許搜尋索引的同時,又阻擋 AI 訓練。為此,Google 推出了一款專用的機器人工具,讓網站能在不影響搜尋索引的情況下,阻擋 AI 訓練的存取權限。

然而,Google 的核心爬蟲仍會持續為搜尋引擎的內建 AI 功能蒐集資料,使得搜尋與 AI 資料需求難以完全區隔。該平台執行長指出,機器人流量早已超越人類造訪量,產業生態系亟需規範各種爬蟲行為。

Cloudflare 持續優化其內容保護工具,從 2024 年的反 AI 爬蟲工具演進至全新的價值導向計費模式。此前,該平台依據爬取量收費,但現在已採用按使用量付費的方式,根據內容在 AI 應用中產生的實際收益來計算費用。 數據顯示,超過半數的 AI 爬蟲反覆抓取尚未更新的頁面,而此付費機制不僅能減少無效流量,還能提升創作者的收入。

現行收費方案已與兩家 AI 公司進行測試,使網站管理員能在其內容被 AI 產品使用時直接獲得收益。在版權法規日益嚴格的環境下,新規定迫使 AI 公司提高其爬取活動的透明度,讓網路創作者能對其內容擁有更大的控制權。

相關文章
MacWhisper 14 更新新增直接編輯文字稿功能,並修正了 CPU 使用率過高的問題 MacWhisper 14 更新新增直接編輯文字稿功能,並修正了 CPU 使用率過高的問題 MacWhisper 的獨立開發者 Jodi Bruijn 昨日發布了 14.0 版,此版本著重於提升轉錄效能,並新增了專用的編輯視圖。 自 2023 年推出以來,MacWhisper 已確立其作為 macOS 平台 AI 驅動轉錄工具的地位,支援在本地執行 OpenAI 的 Whisper 及 NVIDIA 的 Parakeet 等模型。它能直接處理音訊、影片、會議錄音及系統音訊,使其成為播客製
Qwen3.5-Max Preview 登頂 LMArena,中國 AI 模型躋身全球前列 Qwen3.5-Max Preview 登頂 LMArena,中國 AI 模型躋身全球前列 3月20日,權威大模型盲測平臺 LMArena 釋出的最新排行榜顯示,阿里巴巴在 Qwen 系列中的最新旗艦預覽模型 Qwen3.5-Max-Preview 表現卓越。該模型得分 1464 分,穩居頂級梯隊。這一成就不僅打破了國內模型的既往紀錄,更在多個維度上超越了 GPT5.4、Claude4.5 和 Grok4.1 等海外領先模型。這一里程碑標誌著中國自主研發的大模型在通用能力上正式躋身全球第一梯隊,終結了少數海外科技巨頭壟斷最高層級的時代。在這些盲測中,Qwen3.5-Max-Previe
由馬克·貝尼奧夫支援的初創公司旨在解決人工智慧部署挑戰 由馬克·貝尼奧夫支援的初創公司旨在解決人工智慧部署挑戰 大型企業在部署可靠的人工智慧工具時面臨如此嚴峻的挑戰,以至於整個前沿部署工程師團隊——這些嵌入在客戶公司內部以將人工智慧系統投入運營的專業人員——正在湧現,以彌合這一差距。“矛盾的是,人工智慧推高了專業服務的需求,”前 Salesforce 高管、新成立的 June 公司創始人 Efrat Rapoport 週一宣佈該公司結束秘密運營狀態時指出。“行業解決人工智慧整合問題的方法只是僱傭越來越多的人。”Rapoport 與她的三位聯合創始人——Ohad Hen、Barak Goldstein
相關專題推薦
設計與藝術 頂尖 AI 插畫工具:更快地創作編輯畫面與封面插圖
頂尖 AI 插畫工具:更快地創作編輯畫面與封面插圖

2026 年最新高評分 AI 插畫工具:我們精心挑選的清單收錄了功能強大、設計出色的工具,能助您快速創作出令人驚豔的編輯場景與吸睛的封面藝術。每項選項均經過嚴格的實際測試,並提供免費版與付費版的比較,協助您找到最適合您工作流程的工具。 立即嘗試這些不可錯過的解決方案,釋放您的人工智慧優勢,並提升您的創意生產力。現在就前往 XIX.AI 探索吧。

10 個工具
xix.ai
教育與學習 頂尖 AI 補習老師助您備考:練習數學、科學和英語
頂尖 AI 補習老師助您備考:練習數學、科學和英語

2026 年最新、評價最高的考試備考 AI 輔導工具,盡在 XIX.AI!我們精心挑選的清單收錄了多款強大且顛覆傳統的工具,提供免費與付費版本的比較、實際測試,以及每週更新的排行榜。這些工具能幫助您提升寫作效率、簡化複雜主題的學習,並釋放您的學術潛能。 立即探索,發掘最適合您的備考工具,並從今天開始創作,釋放您的 AI 優勢!

10 個工具
xix.ai
金融 用於個人財務管理的 AI 預算規劃工具
用於個人財務管理的 AI 預算規劃工具

2026 年最新最佳頂級評分 AI 預算規劃工具,專為個人財務管理打造,現已登陸 XIX.AI!本精選合集收錄了強大且具顛覆性的解決方案,助您開展實際測試、理解消費習慣,並制定個性化計劃以提升生產力。享受免費與付費版的對比及詳細排名。這些必試工具旨在簡化財務管理,助您釋放 AI 優勢。立即探索!

11 個工具
xix.ai
健康與養生 AI 睡眠追蹤助手:透過更佳的睡前習慣提升恢復效果
AI 睡眠追蹤助手:透過更佳的睡前習慣提升恢復效果

2026 年最新精選、評價最高的 AI 睡眠追蹤助手,助您獲得最佳恢復效果。這份全面更新的每週指南收錄了強大的工具,提供實際測試報告、免費與付費版本的比較,以及詳細排名,協助您找到必試的解決方案,以提升睡眠品質並培養更好的就寢習慣。 立即造訪 XIX.AI,解鎖您的 AI 優勢。

10 個工具
xix.ai
數據分析 用於產品與營收分析的 AI SQL 協作助手
用於產品與營收分析的 AI SQL 協作助手

2026 年最新最佳、評價最高的 AI SQL 輔助工具,專為產品與營收分析打造! XIX.AI 精心甄選了一系列強大且顛覆業界的必試工具,這些工具均經過實戰測試,並透過每週更新的排行榜進行評比。這些工具能透過加速資料分析、簡化複雜查詢,並產生精準洞察來推動更明智的商業決策,從而大幅提升使用者生產力。立即探索,發掘最適合您的工具,釋放您的 AI 優勢!

14 個工具
xix.ai
教育與學習 最佳的「教學型」AI 作業輔助工具:學習概念,而不僅是答案
最佳的「教學型」AI 作業輔助工具:學習概念,而不僅是答案

2026 年最新最佳高評價 AI 作業輔助工具:不僅提供答案,更教授核心概念。專為學生打造的強大工具,必試精選清單,每週更新,免費與付費版本比較,實際測試,精準排名,助您充分發揮學習潛能。立即探索,發掘最適合您的工具,讓學習更聰明。

10 個工具
xix.ai
評論 (0)
0/500
OR