Cloudflares nye AI-regler: Det bliver blokeret – og det får stadig adgang

Cloudflares ændring fra 15. september 2026 trækker en tydeligere grænse mellem traditionel søgeindeksering og AI-tjenesters brug af indhold. For nye domæner, der tilsluttes Cloudflare, bliver crawlere i kategorierne Training og Agent som standard blokeret på sider, hvor der vises annoncer. Kategorien Search er fortsat tilladt. 215

For udgivere er pointen enkel: De kan forsøge at bevare den trafik, der kan sende læsere tilbage til sitet, samtidig med at de begrænser automatiserede systemer, der enten træner modeller på indholdet eller henter det i realtid til en AI-assistent.

Standardreglen: Training og Agent stoppes på annoncesider

Den nye standard gælder for nye domæner ved onboarding til Cloudflare. Når Cloudflare registrerer annoncer på en side, blokeres to former for automatiseret trafik:

• Training: Crawlere, som indsamler indhold til at træne eller finjustere en model.
• Agent: Automatiseret aktivitet, der handler på en persons vegne i realtid – eksempelvis bots, der henter indhold til en chat, eller browseragenter. 13

Search er derimod fortsat tilladt som standard. Cloudflare beskriver denne kategori som crawling eller indeksering, der gør en tjeneste i stand til at besvare spørgsmål senere – en type trafik, hvor udgiveren ifølge Cloudflare bør kunne forvente henvisningstrafik eller anden rimelig kompensation. 13

Det er altså ikke et totalt forbud mod AI. Standardindstillingen rammer kun Training og Agent, og kun på sider med annoncer. 215

Hvem bliver omfattet?

Cloudflares dokumentation angiver, at standardindstillingen gælder domæner, der nyligt tilsluttes netværket. 215 Omtalen af udrulningen beskriver også nye sites, som eksisterende kunder tilføjer, samt Free-abonnementer, hvor indstillingerne ikke er ændret manuelt, som omfattet. 23

Har du allerede et etableret Cloudflare-domæne, bør du derfor ikke gå ud fra, at reglerne automatisk er de samme. Resultatet afhænger blandt andet af domænets onboarding-status, abonnement og eksisterende konfiguration. Den sikre løsning er at kontrollere AI-crawler-indstillingerne for den konkrete zone i Cloudflare. 23

Tre typer trafik kan styres hver for sig

Cloudflare opdeler ikke længere al AI-relateret crawling i én samlet kategori. I stedet kan ejeren konfigurere tre adfærdstyper uafhængigt af hinanden: 13

Kategori	Hvad den dækker	Standard for nye domæner på annoncesider
Search	Crawling eller indeksering til senere besvarelse af spørgsmål	Tilladt
Training	Indsamling af indhold til træning eller finjustering af modeller	Blokeret
Agent	Realtidsautomatisering, der handler for en bruger	Blokeret

For hver kategori kan et site vælge mellem tre niveauer:

1. Tillad trafikken.
2. Blokér på sider med annoncer.
3. Blokér på alle sider. 23

Det gør det eksempelvis muligt at holde Search åben, men blokere Training overalt på sitet – eller nøjes med at beskytte de sider, der er finansieret af annoncer.

Blandede crawlere kan få konsekvenser for SEO

Det mest væsentlige for webstedsejere er, at en crawler ikke nødvendigvis kun har ét formål. Cloudflare oplyser, at crawlere, der kombinerer Search og Training, vurderes ud fra alle deres adfærdstyper. Den mest restriktive relevante regel afgør dermed adgangen. 2615

Det kan betyde, at en crawler, som Cloudflare betragter som både søge- og træningscrawler, mister adgang til almindelig søgecrawling, hvis sitet blokerer Training. Googlebot, Applebot og BingBot nævnes som eksempler på multipurpose-crawlere i denne sammenhæng. 26

Med andre ord: At tillade Search er ikke nødvendigvis nok til at bevare adgangen for en bot, der også er klassificeret som Training. Før en siteejer indfører en blokering af Training på hele sitet, bør vedkommende derfor vurdere den mulige effekt på indeksering og synlighed i søgemaskiner. 24

Den gamle indstilling “Block AI bots” kræver et tjek

Cloudflare har oplyst, at konfigurationer, som blokerer AI-træning – herunder den ældre “Block AI bots”-indstilling – også rammer blandede Search/Training-crawlere. 2

Det er særligt vigtigt for sites, der tidligere har slået den brede indstilling til i forventning om, at den kun ville berøre AI-aktivitet uden relation til søgning.

Senere omtale af septemberudrulningen beskrev en indstilling kaldet “Disallow AI Training”, som skal udtrykke en præference mod AI-træning, mens Googlebot, Applebot og BingBot fortsat kan bruges til søgecrawling, hvis crawleren er betegnet som “Accountable”. Da den konkrete funktion og overgang kan afhænge af den valgte indstilling, bør administratorer kontrollere den aktuelle opsætning i Cloudflare-dashboardet frem for at stole på navnet på en ældre kontakt. 4

Hvorfor Cloudflare skiller søgning fra AI-forbrug

Bag ændringen ligger en udbredt bekymring blandt udgivere. Den traditionelle søgemaskinemodel har været, at en søgemaskine crawler og indekserer sider, men også kan sende brugere videre til den oprindelige kilde. Generative AI-tjenester kan i stedet træne på indhold eller vise hentede svar direkte i deres egen brugerflade – med mindre direkte værdi i form af besøg tilbage til udgiveren.

Cloudflare beskriver Search som trafik, hvor udgiveren bør forvente henvisninger eller tilsvarende kompensation, mens Training og Agent dækker andre måder at tage eller anvende indhold på. 13 Formålet med kontrollerne er at lade ejerne beholde den automatisering, de finder værdifuld, og begrænse den, de ikke gør.

Det afgørende spørgsmål er derfor ikke kun, om en bot er “AI”. Det er, om dens adfærd understøtter opdagelse af indhold og giver noget tilbage til sitet, eller primært bruger materialet til modeltræning eller AI-opgaver i realtid. 13

Det bør webstedsejere gøre nu

Før du ændrer en politik, bør du vurdere konsekvenserne for hver adfærdstype:

• Lad Search være tilladt, hvis indeksering og potentiel henvisningstrafik er vigtig.
• Vælg blokering på sider med annoncer, hvis formålet er at beskytte indtjeningsskabende sider uden en blokering af hele sitet.
• Vælg blokering på alle sider først efter at have undersøgt, om en crawler har både Search- og Training-adfærd.
• Gennemgå ældre “Block AI bots”-opsætninger, især hvis synlighed i Google, Apple eller Bing har betydning. 236

Cloudflares septemberregler giver udgivere mere detaljeret kontrol. Men fordi crawlere med flere formål kan blive ramt af den strengeste regel, er opsætningen også en SEO-beslutning – ikke kun en AI-politik.