Thí điểm nghiên cứu Cloudflare – OpenAI

Bản chất là gì

Cloudflare và OpenAI đang khởi động một thí điểm nghiên cứu chung kết hợp dữ liệu mạng biên của Cloudflare với khả năng tìm kiếm tiên tiến của OpenAI . CEO Cloudflare Matthew Prince cho biết mục tiêu là sử dụng "các tín hiệu mạng chi tiết để tìm ra những cách tốt hơn nhằm nâng cao hiệu quả tìm kiếm AI, giúp người dùng nhận được câu trả lời chất lượng cao nhanh hơn" .

Cách thức hoạt động (tín hiệu mạng thời gian thực)

Thí điểm sử dụng các tín hiệu tổng hợp và ẩn danh từ mạng lưới Cloudflare, nơi vận chuyển hơn 20% lưu lượng web toàn cầu . Các tín hiệu cụ thể bao gồm:

• Độ tươi mới của nội dung – thời gian một trang được cập nhật hoặc tạo ra gần đây.
• Chất lượng lưu lượng – các mẫu chỉ ra liệu một trang có đang được sử dụng tích cực và đáng tin cậy hay không.
• Dữ liệu thay đổi trang thực tế – liệu nội dung có thực sự thay đổi trên máy chủ hay không và tần suất thay đổi, thay vì chỉ dựa vào dấu thời gian sitemap.

Những tín hiệu này giúp công cụ tìm kiếm AI quyết định thu thập gì, khi nào thu thập lại, và nội dung nào có khả năng cũ hoặc chất lượng thấp, mà không cần phải tìm nạp mọi trang một cách suy đoán . Kết quả là việc lập chỉ mục hiệu quả hơn và các câu trả lời kịp thời, chính xác hơn.

Chiến lược rộng hơn: cuộc cải tổ chính sách ngày 1 tháng 7 năm 2026

Thí điểm với OpenAI nằm trong một bộ thay đổi chính sách và sản phẩm lớn hơn nhiều mà Cloudflare công bố vào ngày 1 tháng 7 năm 2026 – mà họ gọi là "Ngày Độc lập Nội dung" (Content Independence Day) .

Phân loại AI crawler ba nhóm mới

Cloudflare chuyển từ cách phân loại đơn giản "có phải bot AI hay không" và yêu cầu tất cả các crawler phải được phân loại vào một hoặc nhiều trong ba trường hợp sử dụng sau :

Cloudflare "khuyến khích mạnh mẽ" các công ty thực hiện cả ba hoạt động nên chạy các crawler riêng biệt, có thể nhận dạng cho từng mục đích .

Cài đặt mặc định sắp tới (15 tháng 9 năm 2026)

Bắt đầu từ 15 tháng 9 năm 2026, Cloudflare sẽ thực thi các cài đặt mặc định mới cho tất cả khách hàng mới, trang web mới từ khách hàng hiện tại và tài khoản miễn phí :

• Crawler Huấn luyện → Bị chặn theo mặc định trên các trang có quảng cáo.
• Crawler Tác tử → Bị chặn theo mặc định trên các trang có quảng cáo.
• Crawler hỗn hợp (bot kết hợp tìm kiếm, huấn luyện và/hoặc chức năng tác tử trong một lần) → Bị chặn theo mặc định trên bất kỳ trang nào có quảng cáo .
• Crawler chỉ Tìm kiếm → Được phép theo mặc định, để các trang web vẫn có thể được khám phá trong tìm kiếm truyền thống.

Thay đổi mạnh mẽ nhất nhắm vào crawler hỗn hợp: các bot này thu thập nội dung cho cả tìm kiếm và huấn luyện AI trong một lần duy nhất, khiến chủ sở hữu trang web không thể biết dữ liệu phục vụ mục đích nào. Việc chặn mặc định của Cloudflare buộc các công ty AI phải tách các crawler của họ hoặc mất quyền truy cập vào các trang có quảng cáo .

Pay Per Use: thử nghiệm đền bù cho nhà xuất bản

Ngày 1 tháng 7 năm 2026, Cloudflare cũng thông báo chuyển từ mô hình Pay Per Crawl (Trả theo Lần thu thập) trước đó (công bố năm 2025) sang mô hình Pay Per Use (Trả theo Lần sử dụng) :

• Pay Per Crawl (bản beta riêng năm 2025): tính phí các công ty AI mỗi khi crawler yêu cầu nội dung, sử dụng mã trạng thái HTTP và xác thực .
• Pay Per Use (công bố tháng 7 năm 2026): nhà xuất bản được trả tiền khi nội dung của họ thực sự tạo ra câu trả lời AI, không chỉ khi nó được thu thập . Điều này được mô tả như một "tiện ích đo lường" cho tìm kiếm AI – công ty AI trả tiền cho giá trị mà nó mang lại, chứ không chỉ là quyền truy cập thô .

Mô hình Pay Per Use vẫn được mô tả là một "thử nghiệm ban đầu" và "chương trình nghiên cứu" . Giá cả chính xác, tỷ lệ doanh thu và lộ trình triển khai cho phiên bản công khai chưa được công bố.

Các mảnh ghép kết nối với nhau như thế nào

Thí điểm nghiên cứu với OpenAI, phân loại ba nhóm, chặn mặc định đối với crawler hỗn hợp và thử nghiệm Pay Per Use đều là một phần của một chiến lược thống nhất :

1. Buộc minh bạch – bằng cách yêu cầu các crawler riêng biệt cho tìm kiếm so với huấn luyện so với tác tử, chủ sở hữu trang web cuối cùng có thể thấy mỗi bot đang làm gì.
2. Trao quyền kiểm soát cho chủ sở hữu trang web – các cài đặt mặc định chặn các hành vi mang tính khai thác nhiều nhất (huấn luyện, tác tử, hỗn hợp) trong khi vẫn duy trì khả năng khám phá (cho phép tìm kiếm).
3. Tạo một lớp đền bù – Pay Per Use thay thế thỏa thuận "thu thập miễn phí, nhận lượt giới thiệu" đã lỗi thời bằng khoản thanh toán gắn với việc tạo ra câu trả lời AI thực tế.
4. Làm cho tìm kiếm AI thông minh hơn – thí điểm với OpenAI sử dụng tín hiệu thời gian thực của Cloudflare để giảm việc thu thập dữ liệu lãng phí và cải thiện tính kịp thời cũng như độ chính xác của câu trả lời AI, mang lại lợi ích cho cả nhà xuất bản (ghi nhận tốt hơn) và các công ty AI (giảm chi phí hạ tầng).

Thí điểm nghiên cứu Cloudflare – OpenAI

Bản chất là gì

Cloudflare và OpenAI đang khởi động một thí điểm nghiên cứu chung kết hợp dữ liệu mạng biên của Cloudflare với khả năng tìm kiếm tiên tiến của OpenAI . CEO Cloudflare Matthew Prince cho biết mục tiêu là sử dụng "các tín hiệu mạng chi tiết để tìm ra những cách tốt hơn nhằm nâng cao hiệu quả tìm kiếm AI, giúp người dùng nhận được câu trả lời chất lượng cao nhanh hơn" .

Cách thức hoạt động (tín hiệu mạng thời gian thực)

Thí điểm sử dụng các tín hiệu tổng hợp và ẩn danh từ mạng lưới Cloudflare, nơi vận chuyển hơn 20% lưu lượng web toàn cầu . Các tín hiệu cụ thể bao gồm:

• Độ tươi mới của nội dung – thời gian một trang được cập nhật hoặc tạo ra gần đây.
• Chất lượng lưu lượng – các mẫu chỉ ra liệu một trang có đang được sử dụng tích cực và đáng tin cậy hay không.
• Dữ liệu thay đổi trang thực tế – liệu nội dung có thực sự thay đổi trên máy chủ hay không và tần suất thay đổi, thay vì chỉ dựa vào dấu thời gian sitemap.

Những tín hiệu này giúp công cụ tìm kiếm AI quyết định thu thập gì, khi nào thu thập lại, và nội dung nào có khả năng cũ hoặc chất lượng thấp, mà không cần phải tìm nạp mọi trang một cách suy đoán . Kết quả là việc lập chỉ mục hiệu quả hơn và các câu trả lời kịp thời, chính xác hơn.

Chiến lược rộng hơn: cuộc cải tổ chính sách ngày 1 tháng 7 năm 2026

Thí điểm với OpenAI nằm trong một bộ thay đổi chính sách và sản phẩm lớn hơn nhiều mà Cloudflare công bố vào ngày 1 tháng 7 năm 2026 – mà họ gọi là "Ngày Độc lập Nội dung" (Content Independence Day) .

Phân loại AI crawler ba nhóm mới

Cloudflare chuyển từ cách phân loại đơn giản "có phải bot AI hay không" và yêu cầu tất cả các crawler phải được phân loại vào một hoặc nhiều trong ba trường hợp sử dụng sau :

Cloudflare "khuyến khích mạnh mẽ" các công ty thực hiện cả ba hoạt động nên chạy các crawler riêng biệt, có thể nhận dạng cho từng mục đích .

Cài đặt mặc định sắp tới (15 tháng 9 năm 2026)

Bắt đầu từ 15 tháng 9 năm 2026, Cloudflare sẽ thực thi các cài đặt mặc định mới cho tất cả khách hàng mới, trang web mới từ khách hàng hiện tại và tài khoản miễn phí :

• Crawler Huấn luyện → Bị chặn theo mặc định trên các trang có quảng cáo.
• Crawler Tác tử → Bị chặn theo mặc định trên các trang có quảng cáo.
• Crawler hỗn hợp (bot kết hợp tìm kiếm, huấn luyện và/hoặc chức năng tác tử trong một lần) → Bị chặn theo mặc định trên bất kỳ trang nào có quảng cáo .
• Crawler chỉ Tìm kiếm → Được phép theo mặc định, để các trang web vẫn có thể được khám phá trong tìm kiếm truyền thống.

Thay đổi mạnh mẽ nhất nhắm vào crawler hỗn hợp: các bot này thu thập nội dung cho cả tìm kiếm và huấn luyện AI trong một lần duy nhất, khiến chủ sở hữu trang web không thể biết dữ liệu phục vụ mục đích nào. Việc chặn mặc định của Cloudflare buộc các công ty AI phải tách các crawler của họ hoặc mất quyền truy cập vào các trang có quảng cáo .

Pay Per Use: thử nghiệm đền bù cho nhà xuất bản

Ngày 1 tháng 7 năm 2026, Cloudflare cũng thông báo chuyển từ mô hình Pay Per Crawl (Trả theo Lần thu thập) trước đó (công bố năm 2025) sang mô hình Pay Per Use (Trả theo Lần sử dụng) :

• Pay Per Crawl (bản beta riêng năm 2025): tính phí các công ty AI mỗi khi crawler yêu cầu nội dung, sử dụng mã trạng thái HTTP và xác thực .
• Pay Per Use (công bố tháng 7 năm 2026): nhà xuất bản được trả tiền khi nội dung của họ thực sự tạo ra câu trả lời AI, không chỉ khi nó được thu thập . Điều này được mô tả như một "tiện ích đo lường" cho tìm kiếm AI – công ty AI trả tiền cho giá trị mà nó mang lại, chứ không chỉ là quyền truy cập thô .

Mô hình Pay Per Use vẫn được mô tả là một "thử nghiệm ban đầu" và "chương trình nghiên cứu" . Giá cả chính xác, tỷ lệ doanh thu và lộ trình triển khai cho phiên bản công khai chưa được công bố.

Các mảnh ghép kết nối với nhau như thế nào

Thí điểm nghiên cứu với OpenAI, phân loại ba nhóm, chặn mặc định đối với crawler hỗn hợp và thử nghiệm Pay Per Use đều là một phần của một chiến lược thống nhất :

1. Buộc minh bạch – bằng cách yêu cầu các crawler riêng biệt cho tìm kiếm so với huấn luyện so với tác tử, chủ sở hữu trang web cuối cùng có thể thấy mỗi bot đang làm gì.
2. Trao quyền kiểm soát cho chủ sở hữu trang web – các cài đặt mặc định chặn các hành vi mang tính khai thác nhiều nhất (huấn luyện, tác tử, hỗn hợp) trong khi vẫn duy trì khả năng khám phá (cho phép tìm kiếm).
3. Tạo một lớp đền bù – Pay Per Use thay thế thỏa thuận "thu thập miễn phí, nhận lượt giới thiệu" đã lỗi thời bằng khoản thanh toán gắn với việc tạo ra câu trả lời AI thực tế.
4. Làm cho tìm kiếm AI thông minh hơn – thí điểm với OpenAI sử dụng tín hiệu thời gian thực của Cloudflare để giảm việc thu thập dữ liệu lãng phí và cải thiện tính kịp thời cũng như độ chính xác của câu trả lời AI, mang lại lợi ích cho cả nhà xuất bản (ghi nhận tốt hơn) và các công ty AI (giảm chi phí hạ tầng).