Esses sinais ajudam um mecanismo de busca com IA a decidir o que rastrear, quando rastrear novamente e qual conteúdo provavelmente está desatualizado ou é de baixa qualidade, sem ter que buscar cada página especulativamente . O resultado é uma indexação mais eficiente e respostas mais oportunas e precisas.
O piloto com a OpenAI se encaixa em um conjunto muito maior de mudanças de políticas e produtos que a Cloudflare anunciou em 1º de julho de 2026 – que chamou de "Dia da Independência do Conteúdo" TBB.
A Cloudflare abandonou a classificação simples "bot de IA ou não" e agora exige que todos os rastreadores sejam classificados em um ou mais de três casos de uso TB:
| Categoria | Comportamento | Exemplo |
|---|---|---|
| Busca | Indexar conteúdo para responder a consultas posteriormente. Os donos de sites devem receber tráfego de referência ou compensação. | Rastreadores padrão de mecanismos de busca |
| Agente | Ações automatizadas em tempo real em nome de um usuário (fetch de chat, agentes de uso de navegador). | Agentes ChatGPT-User, Claude, Gemini |
| Treinamento | Rastrear para treinar ou ajustar um modelo. Os dados são absorvidos permanentemente pelo modelo. | Rastreadores de treinamento em massa |
A Cloudflare "incentiva fortemente" as empresas que fazem os três tipos a executar rastreadores separados e identificáveis para cada finalidade T.
A partir de 15 de setembro de 2026, a Cloudflare aplicará novas configurações padrão para todos os novos clientes, novos sites de clientes existentes e contas de nível gratuito TBB:
A mudança mais drástica atinge os rastreadores mistos: esses bots coletam conteúdo para busca e treinamento de IA em uma única passagem, tornando impossível para os donos de sites saberem para qual finalidade os dados servem. O bloqueio padrão da Cloudflare força as empresas de IA a dividirem seus rastreadores ou perderem o acesso a páginas com anúncios TB.
Em 1º de julho de 2026, a Cloudflare também anunciou que está migrando de seu modelo anterior Pague por Rastreamento (anunciado em 2025) para um modelo Pague por Uso BB:
O modelo Pague por Uso ainda é descrito como um "experimento inicial" e um "programa de pesquisa" B. Seus preços exatos, divisões de receita e cronograma de lançamento para disponibilidade geral não foram publicados.
O piloto de pesquisa com a OpenAI, a taxonomia de três categorias, os bloqueios padrão em rastreadores mistos e os experimentos Pague por Uso fazem parte de uma estratégia coesa TBB: