Cloudflare 的政策要求人工智慧企業為使用的相關內容向內容釋出方支付費用

Cloudflare 為人工智慧行業設定了新的截止期限,要求將用於傳統搜尋引擎(如 Google Search)的網頁爬蟲與專為人工智慧智慧體及訓練設計的爬蟲分開。該公司在週三宣佈,自 2026 年 9 月 15 日起,Cloudflare 的預設設定將會阻止那些“混合用途”的爬蟲訪問任何顯示廣告的頁面。
這意味著,除非網站所有者手動調整設定,否則兼具搜尋、智慧體功能及訓練功能的爬蟲將預設被禁止訪問這些站點。據該公司稱,這一變更將適用於新註冊的 Cloudflare 客戶、現有客戶新建的網站以及所有現有的免費層級使用者。
這一舉措可能會影響人工智慧模型提供商獲取網頁內容用於訓練以及為其基於智慧體的服務提供支援的方式。
Cloudflare 指出,大多數網站所有者希望自己的內容既能透過搜尋引擎被找到,也能透過人工智慧服務被檢索到,但同時他們也希望有措施防止自己的智慧財產權被免費洩露。
Cloudflare 特別提到了“全球最大的搜尋引擎”(顯然指的是 Google),稱該公司的獲取資訊量大約是其他人工智慧公司的兩倍,因為這家搜尋巨頭使得網站所有者難以在不被用於人工智慧開發的情況下仍保持可被發現的狀態。
Google 之前曾對這種概括提出過反駁,指出自己提供名為 Google Extended 的爬蟲工具,允許網站所有者選擇不讓其內容被用於訓練以及 Gemini Apps 和 Vertex API 等人工智慧產品。使用該選項並不會影響網站在 Google Search 中的展示情況。不過,Google 的核心爬蟲 Googlebot 仍會為搜尋功能進行抓取,包括 AI Overviews 和 AI Mode 等人工智慧相關功能。
“既然目前網際網路上的流量大多來自非人類使用者,我們就必須更進一步、更快採取行動,才能建立起可持續的生態系統,”Cloudflare 聯合創始人兼執行長 Matthew Prince 在公告中表示。他指的是近期出現的一個里程碑:機器人的抓取流量首次超過了人類的上網流量——而這一轉變原本預計要到明年才會發生。
“Cloudflare 的新工具和合作夥伴關係能夠提升網站所有者的可見度並帶來更多商業機會,同時也有利於那些擁有意圖清晰透明的爬蟲的人工智慧公司。我們希望所提議的預設設定變更能夠促使混合用途的爬蟲將搜尋功能與智慧體使用及訓練功能區分開來,”Prince 說道。
雖然 Cloudflare 提供了多種產品幫助使用者構建自己的人工智慧系統,但該公司也推出了一系列工具,讓內容釋出者在人工智慧時代能更好地掌控自己的內容。近年來,Cloudflare 推出了用於抵禦人工智慧爬蟲的工具,其中包括一個名為 Pay Per Crawl 的市場平臺,允許網站向進行資料抓取的人工智慧爬蟲收取費用。
該公司表示,這種收費模式目前正在演變為“按使用次數付費”,屆時內容釋出者可以在其內容創造價值時向人工智慧公司收費,而不僅僅是在內容被獲取時收費。
這一變化還有助於為人工智慧模型提供商節省內容釋出者的頻寬和計算資源,因為 Cloudflare 的資料表明,超過 50% 的人工智慧爬蟲抓取流量都用於重新獲取那些並未發生變化的頁面。
為了落實這一舉措,Cloudflare 目前正與 Ceramic.ai 和 You.com 兩家合作伙伴展開合作。當內容釋出者選擇參與後,只要其內容出現在 Ceramic 的人工智慧搜尋結果中,或被 You.com 訪問其高階內容,他們就能獲得報酬。
Cloudflare 表示,其他人工智慧公司也可以根據自身的運營方式對這一模式進行定製。
相關文章
Google AI 概覽在搜尋結果中佔據一席之地
根據 Similarweb 的《2026 年生成式 AI 發展現況》報告,Google 由 AI 生成的摘要出現在 43% 的美國搜尋結果中,相較於一年前的 15%,呈現顯著增長。雖然「AI 概覽」會在標準搜尋結果中呈現生成的摘要,「AI 模式」則針對複雜查詢及後續提示提供對話式介面。使用者可在不丟失原始搜尋脈絡的情況下,從「AI 概覽」切換至「AI 模式」。Google 解釋,AI 模式採用一種
谷歌每月將向 SpaceX 支付 9.2 億美元用於計算資源
SpaceX 在具有里程碑意義的 IPO 之前獲得了另一項重大計算協議,此次是與谷歌合作。該公司於週五在監管檔案中披露了這一安排。根據該協議,谷歌將從 2026 年 10 月至 2029 年 6 月每月向 SpaceX 支付 9.2 億美元,以獲取“約 110,000 個 NVIDIA GPU、CPU、記憶體及其他相關元件”的使用權。這一安排的範圍和期限與 SpaceX 於 5 月下旬宣佈的與 Anthropic 達成的協議相似。根據該協議,Anthropic 承諾到 2029 年每月向 Sp
谷歌擴充套件 AI 模式以追蹤航班價格並預訂酒店
Google 週四宣佈,在其對話式搜尋介面 AI Mode 中引入了新功能,使使用者能夠更有效地規劃和預訂旅行。更新後的功能允許使用者查詢機票價格趨勢、預訂住宿,並直接透過該工具檢視以積分或里程計算的費用。這些增強功能標誌著 Google 將 AI Mode 定位為綜合 AI 旅行助理的戰略,使其從僅提供資訊轉變為積極管理旅行規劃和預訂的各個環節。使用者現在可以向 AI Mode 指定旅行日期和目的地,該功能將提供來自 300 多家航空公司和旅行平臺的當前最佳可用選項及價格。對於那些準備確定行程的使用者
相關專題推薦
評論 (0)
0/500

Cloudflare 為人工智慧行業設定了新的截止期限,要求將用於傳統搜尋引擎(如 Google Search)的網頁爬蟲與專為人工智慧智慧體及訓練設計的爬蟲分開。該公司在週三宣佈,自 2026 年 9 月 15 日起,Cloudflare 的預設設定將會阻止那些“混合用途”的爬蟲訪問任何顯示廣告的頁面。
這意味著,除非網站所有者手動調整設定,否則兼具搜尋、智慧體功能及訓練功能的爬蟲將預設被禁止訪問這些站點。據該公司稱,這一變更將適用於新註冊的 Cloudflare 客戶、現有客戶新建的網站以及所有現有的免費層級使用者。
這一舉措可能會影響人工智慧模型提供商獲取網頁內容用於訓練以及為其基於智慧體的服務提供支援的方式。
Cloudflare 指出,大多數網站所有者希望自己的內容既能透過搜尋引擎被找到,也能透過人工智慧服務被檢索到,但同時他們也希望有措施防止自己的智慧財產權被免費洩露。
Cloudflare 特別提到了“全球最大的搜尋引擎”(顯然指的是 Google),稱該公司的獲取資訊量大約是其他人工智慧公司的兩倍,因為這家搜尋巨頭使得網站所有者難以在不被用於人工智慧開發的情況下仍保持可被發現的狀態。
Google 之前曾對這種概括提出過反駁,指出自己提供名為 Google Extended 的爬蟲工具,允許網站所有者選擇不讓其內容被用於訓練以及 Gemini Apps 和 Vertex API 等人工智慧產品。使用該選項並不會影響網站在 Google Search 中的展示情況。不過,Google 的核心爬蟲 Googlebot 仍會為搜尋功能進行抓取,包括 AI Overviews 和 AI Mode 等人工智慧相關功能。
“既然目前網際網路上的流量大多來自非人類使用者,我們就必須更進一步、更快採取行動,才能建立起可持續的生態系統,”Cloudflare 聯合創始人兼執行長 Matthew Prince 在公告中表示。他指的是近期出現的一個里程碑:機器人的抓取流量首次超過了人類的上網流量——而這一轉變原本預計要到明年才會發生。
“Cloudflare 的新工具和合作夥伴關係能夠提升網站所有者的可見度並帶來更多商業機會,同時也有利於那些擁有意圖清晰透明的爬蟲的人工智慧公司。我們希望所提議的預設設定變更能夠促使混合用途的爬蟲將搜尋功能與智慧體使用及訓練功能區分開來,”Prince 說道。
雖然 Cloudflare 提供了多種產品幫助使用者構建自己的人工智慧系統,但該公司也推出了一系列工具,讓內容釋出者在人工智慧時代能更好地掌控自己的內容。近年來,Cloudflare 推出了用於抵禦人工智慧爬蟲的工具,其中包括一個名為 Pay Per Crawl 的市場平臺,允許網站向進行資料抓取的人工智慧爬蟲收取費用。
該公司表示,這種收費模式目前正在演變為“按使用次數付費”,屆時內容釋出者可以在其內容創造價值時向人工智慧公司收費,而不僅僅是在內容被獲取時收費。
這一變化還有助於為人工智慧模型提供商節省內容釋出者的頻寬和計算資源,因為 Cloudflare 的資料表明,超過 50% 的人工智慧爬蟲抓取流量都用於重新獲取那些並未發生變化的頁面。
為了落實這一舉措,Cloudflare 目前正與 Ceramic.ai 和 You.com 兩家合作伙伴展開合作。當內容釋出者選擇參與後,只要其內容出現在 Ceramic 的人工智慧搜尋結果中,或被 You.com 訪問其高階內容,他們就能獲得報酬。
Cloudflare 表示,其他人工智慧公司也可以根據自身的運營方式對這一模式進行定製。
Google AI 概覽在搜尋結果中佔據一席之地
根據 Similarweb 的《2026 年生成式 AI 發展現況》報告,Google 由 AI 生成的摘要出現在 43% 的美國搜尋結果中,相較於一年前的 15%,呈現顯著增長。雖然「AI 概覽」會在標準搜尋結果中呈現生成的摘要,「AI 模式」則針對複雜查詢及後續提示提供對話式介面。使用者可在不丟失原始搜尋脈絡的情況下,從「AI 概覽」切換至「AI 模式」。Google 解釋,AI 模式採用一種
谷歌每月將向 SpaceX 支付 9.2 億美元用於計算資源
SpaceX 在具有里程碑意義的 IPO 之前獲得了另一項重大計算協議,此次是與谷歌合作。該公司於週五在監管檔案中披露了這一安排。根據該協議,谷歌將從 2026 年 10 月至 2029 年 6 月每月向 SpaceX 支付 9.2 億美元,以獲取“約 110,000 個 NVIDIA GPU、CPU、記憶體及其他相關元件”的使用權。這一安排的範圍和期限與 SpaceX 於 5 月下旬宣佈的與 Anthropic 達成的協議相似。根據該協議,Anthropic 承諾到 2029 年每月向 Sp
谷歌擴充套件 AI 模式以追蹤航班價格並預訂酒店
Google 週四宣佈,在其對話式搜尋介面 AI Mode 中引入了新功能,使使用者能夠更有效地規劃和預訂旅行。更新後的功能允許使用者查詢機票價格趨勢、預訂住宿,並直接透過該工具檢視以積分或里程計算的費用。這些增強功能標誌著 Google 將 AI Mode 定位為綜合 AI 旅行助理的戰略,使其從僅提供資訊轉變為積極管理旅行規劃和預訂的各個環節。使用者現在可以向 AI Mode 指定旅行日期和目的地,該功能將提供來自 300 多家航空公司和旅行平臺的當前最佳可用選項及價格。對於那些準備確定行程的使用者





首頁






