Cloudflare–OpenAI 研究試點

係啲乜？

Cloudflare 同 OpenAI 將會展開一個聯合研究試點，結合 Cloudflare 嘅邊緣網絡數據同 OpenAI 嘅前沿搜尋能力 。Cloudflare 行政總裁 Matthew Prince 表示，目標係利用「精細嘅網絡訊號，搵出更好嘅方法嚟提升 AI 搜尋效率，幫用戶更快得到高質素嘅答案」。

點樣運作？（實時網絡訊號）

呢個試點會使用嚟自 Cloudflare 網絡嘅匿名化匯總訊號，該網絡承載咗全球超過 20% 嘅網絡流量 。具體嘅訊號包括：

• 內容新鮮度 – 頁面最近被更新或創建嘅時間。
• 流量質素 – 顯示頁面係咪被積極使用同受信任嘅模式。
• 實際頁面變更數據 – 內容係咪真係有變、幾耐變一次，而唔係依賴網站地圖（sitemap）嘅時間戳。

呢啲訊號可以幫助 AI 搜尋引擎決定 爬取啲乜、幾時重新爬取，同埋 邊啲內容可能係過時或者低質素，而唔需要每次都揣測性咁 Fetch 晒成個頁面 。結果係索引效率更高，答案亦都更及時、更準確。

更廣泛嘅策略：2026 年 7 月 1 日嘅政策大改革

呢個 OpenAI 試點係 Cloudflare 喺 2026 年 7 月 1 日公布嘅一大系列政策同產品變更嘅一部分——佢哋稱之為「內容獨立日」。

全新嘅三類 AI 爬蟲分類法

Cloudflare 放棄咗簡單嘅「係咪 AI 機械人」分類法，而係要求所有爬蟲都要歸入以下三個用途類別之一 ：

Cloudflare 「強烈鼓勵」同時進行呢三類活動嘅公司，為每個用途運行 獨立、可識別 嘅爬蟲 。

即將推出嘅預設設定（2026 年 9 月 15 日）

由 2026 年 9 月 15 日 起，Cloudflare 將會對所有新客戶、現有客戶嘅新網站，以及免費方案帳戶實施新嘅預設設定 ：

• 訓練爬蟲 → 喺有廣告嘅頁面上 預設封鎖。
• 代理爬蟲 → 喺有廣告嘅頁面上 預設封鎖。
• 混合用途爬蟲（同時進行搜尋、訓練同/或代理功能嘅機械人）→ 喺任何有廣告嘅頁面上 預設封鎖 。
• 純搜尋爬蟲 → 預設允許，令網站繼續可以喺傳統搜尋中被發現。

最明顯嘅改變係針對 混合用途爬蟲：呢啲機械人喺一次爬取過程中同時收集用於搜尋同 AI 訓練嘅內容，令網站擁有者無從判斷數據嘅用途。Cloudflare 嘅預設封鎖會迫使 AI 公司將爬蟲分開，否則就會失去對廣告支援頁面嘅存取權 。

按使用付費：出版商補償嘅實驗

喺 2026 年 7 月 1 日，Cloudflare 亦都宣布由之前嘅 「按爬取付費」（Pay Per Crawl）模式（2025 年宣布）轉向 「按使用付費」（Pay Per Use）模式 ：

• 按爬取付費（2025 年私人測試）：每次 AI 爬蟲要求內容時收費，利用 HTTP 狀態碼同驗證機制 。
• 按使用付費（2026 年 7 月宣布）：當出版商嘅內容 實際上被用嚟生成 AI 答案 時，佢哋先會獲得報酬，而唔係單單被爬取 。呢個模式被形容為 AI 搜尋嘅「按量計費公用事業」——AI 公司係為佢哋提供嘅價值付費，而唔係為未經加工嘅存取權付費 。

「按使用付費」模式仍然被描述為「早期實驗」同「研究計劃」。其具體定價、收入分成同普遍可用嘅推出時間表尚未公布。

點樣組合埋一齊？

OpenAI 研究試點、三類分類法、對混合用途爬蟲嘅預設封鎖，以及「按使用付費」實驗，全部都係一個連貫策略嘅一部分 ：

1. 強制透明化 – 透過要求搜尋、訓練同代理使用獨立嘅爬蟲，網站擁有者終於可以睇到每個機械人嘅具體用途。
2. 俾網站擁有者控制權 – 預設設定會封鎖最具掠奪性嘅行為（訓練、代理、混合用途），同時保留被發現嘅能力（允許搜尋）。
3. 建立補償層 – 「按使用付費」取代咗「免費爬取、用推薦流量回報」呢個已經失效嘅協議，將補償同實際嘅 AI 答案生成掛鉤。
4. 令 AI 搜尋更聰明 – OpenAI 試點利用 Cloudflare 嘅即時訊號，減少無謂嘅爬取，並提升 AI 答案嘅時效同準確性，對出版商（更好嘅歸因）同 AI 公司（更低嘅基礎設施成本）都有好處。

資料來源

TechCrunch – Cloudflare's new policy pushes AI companies to pay for publishers' content (2026-07-01)
Cloudflare Blog – Your site, your rules: new AI traffic options for all customers (2026-07-01)
Cloudflare Blog – Introducing pay per crawl (2025-07-01)
Cloudflare Press Release – Cloudflare Announces Research Pilot with OpenAI (2026-07-08)
Yahoo Finance – Cloudflare Announces Research Pilot with OpenAI (2026-07-08)
Cloudflare Blog – Making AI search smarter (2026-07-01)
Investing.com – Cloudflare, OpenAI launch research pilot on AI search indexing (2026-07-08)

Cloudflare–OpenAI 研究試點

係啲乜？

Cloudflare 同 OpenAI 將會展開一個聯合研究試點，結合 Cloudflare 嘅邊緣網絡數據同 OpenAI 嘅前沿搜尋能力 。Cloudflare 行政總裁 Matthew Prince 表示，目標係利用「精細嘅網絡訊號，搵出更好嘅方法嚟提升 AI 搜尋效率，幫用戶更快得到高質素嘅答案」。

點樣運作？（實時網絡訊號）

呢個試點會使用嚟自 Cloudflare 網絡嘅匿名化匯總訊號，該網絡承載咗全球超過 20% 嘅網絡流量 。具體嘅訊號包括：

• 內容新鮮度 – 頁面最近被更新或創建嘅時間。
• 流量質素 – 顯示頁面係咪被積極使用同受信任嘅模式。
• 實際頁面變更數據 – 內容係咪真係有變、幾耐變一次，而唔係依賴網站地圖（sitemap）嘅時間戳。

呢啲訊號可以幫助 AI 搜尋引擎決定 爬取啲乜、幾時重新爬取，同埋 邊啲內容可能係過時或者低質素，而唔需要每次都揣測性咁 Fetch 晒成個頁面 。結果係索引效率更高，答案亦都更及時、更準確。

更廣泛嘅策略：2026 年 7 月 1 日嘅政策大改革

呢個 OpenAI 試點係 Cloudflare 喺 2026 年 7 月 1 日公布嘅一大系列政策同產品變更嘅一部分——佢哋稱之為「內容獨立日」。

全新嘅三類 AI 爬蟲分類法

Cloudflare 放棄咗簡單嘅「係咪 AI 機械人」分類法，而係要求所有爬蟲都要歸入以下三個用途類別之一 ：

Cloudflare 「強烈鼓勵」同時進行呢三類活動嘅公司，為每個用途運行 獨立、可識別 嘅爬蟲 。

即將推出嘅預設設定（2026 年 9 月 15 日）

由 2026 年 9 月 15 日 起，Cloudflare 將會對所有新客戶、現有客戶嘅新網站，以及免費方案帳戶實施新嘅預設設定 ：

• 訓練爬蟲 → 喺有廣告嘅頁面上 預設封鎖。
• 代理爬蟲 → 喺有廣告嘅頁面上 預設封鎖。
• 混合用途爬蟲（同時進行搜尋、訓練同/或代理功能嘅機械人）→ 喺任何有廣告嘅頁面上 預設封鎖 。
• 純搜尋爬蟲 → 預設允許，令網站繼續可以喺傳統搜尋中被發現。

最明顯嘅改變係針對 混合用途爬蟲：呢啲機械人喺一次爬取過程中同時收集用於搜尋同 AI 訓練嘅內容，令網站擁有者無從判斷數據嘅用途。Cloudflare 嘅預設封鎖會迫使 AI 公司將爬蟲分開，否則就會失去對廣告支援頁面嘅存取權 。

按使用付費：出版商補償嘅實驗

喺 2026 年 7 月 1 日，Cloudflare 亦都宣布由之前嘅 「按爬取付費」（Pay Per Crawl）模式（2025 年宣布）轉向 「按使用付費」（Pay Per Use）模式 ：

• 按爬取付費（2025 年私人測試）：每次 AI 爬蟲要求內容時收費，利用 HTTP 狀態碼同驗證機制 。
• 按使用付費（2026 年 7 月宣布）：當出版商嘅內容 實際上被用嚟生成 AI 答案 時，佢哋先會獲得報酬，而唔係單單被爬取 。呢個模式被形容為 AI 搜尋嘅「按量計費公用事業」——AI 公司係為佢哋提供嘅價值付費，而唔係為未經加工嘅存取權付費 。

「按使用付費」模式仍然被描述為「早期實驗」同「研究計劃」。其具體定價、收入分成同普遍可用嘅推出時間表尚未公布。

點樣組合埋一齊？

OpenAI 研究試點、三類分類法、對混合用途爬蟲嘅預設封鎖，以及「按使用付費」實驗，全部都係一個連貫策略嘅一部分 ：

1. 強制透明化 – 透過要求搜尋、訓練同代理使用獨立嘅爬蟲，網站擁有者終於可以睇到每個機械人嘅具體用途。
2. 俾網站擁有者控制權 – 預設設定會封鎖最具掠奪性嘅行為（訓練、代理、混合用途），同時保留被發現嘅能力（允許搜尋）。
3. 建立補償層 – 「按使用付費」取代咗「免費爬取、用推薦流量回報」呢個已經失效嘅協議，將補償同實際嘅 AI 答案生成掛鉤。
4. 令 AI 搜尋更聰明 – OpenAI 試點利用 Cloudflare 嘅即時訊號，減少無謂嘅爬取，並提升 AI 答案嘅時效同準確性，對出版商（更好嘅歸因）同 AI 公司（更低嘅基礎設施成本）都有好處。

資料來源

TechCrunch – Cloudflare's new policy pushes AI companies to pay for publishers' content (2026-07-01)
Cloudflare Blog – Your site, your rules: new AI traffic options for all customers (2026-07-01)
Cloudflare Blog – Introducing pay per crawl (2025-07-01)
Cloudflare Press Release – Cloudflare Announces Research Pilot with OpenAI (2026-07-08)
Yahoo Finance – Cloudflare Announces Research Pilot with OpenAI (2026-07-08)
Cloudflare Blog – Making AI search smarter (2026-07-01)
Investing.com – Cloudflare, OpenAI launch research pilot on AI search indexing (2026-07-08)