Cloudflare odděluje trénování AI od vyhledávání

Cloudflare 15. září 2026 spustil nastavení Disallow AI Training. Jeho smyslem je odstranit nepříjemnou volbu, před níž stáli majitelé webů a vydavatelé: buď umožnit firmám používat jejich obsah pro trénování modelů AI, nebo riskovat ztrátu viditelnosti v klasickém vyhledávání.

Nová volba umožňuje vyjádřit zákaz trénování modelů a blokovat odpovídající provoz crawlerů, přičemž za stanovených podmínek ponechá přístup robotům pro indexaci ve vyhledávání. 720

Trénování už není totéž co vyhledávání

Cloudflare nahradil dřívější široké tlačítko Block AI Bots samostatnými kontrolami pro tři druhy využití crawlerů:

• Search – procházení obsahu kvůli indexaci ve vyhledávání,
• Training – použití obsahu k trénování nebo dolaďování modelu,
• Agent – provoz AI agentů jednajících jménem uživatele.

Vydavatel tak může pro každý případ určit jiné pravidlo namísto plošného zablokování botů. Cloudflare uvedl, že nové ovládací prvky a doporučená nastavení zpřístupnil firmám a vydavatelům při zářijovém spuštění. 1320

Pro web, který chce zůstat dohledatelný, ale nechce poskytovat svůj obsah pro trénink modelů, je určeno právě Disallow AI Training. Nastavení zveřejní preferenci „netrénovat“ pomocí nástrojů Cloudflare pro pravidla botů a robots.txt a zároveň aplikuje blokování trénovacího provozu. 167

Jak může zůstat zachována indexace

Někteří roboti mají více účelů. Googlebot, Applebot a Bingbot například procházejí web pro vyhledávání, zatímco jejich provozovatelé mohou mít i jiné, s AI související způsoby využití obsahu. Cloudflare proto rozlišuje roli robota ve vyhledávání od trénování.

Po zapnutí Disallow AI Training platí:

• smíšený crawler se statusem Accountable může dál přistupovat k obsahu kvůli indexaci ve vyhledávání;
• jeho provozovatel má respektovat zákaz použití tohoto obsahu pro trénování AI;
• specializované trénovací crawlery a smíšené crawlery provozovatelů bez statusu Accountable jsou v rámci tohoto pravidla blokovány. 71724

To se liší od přísnější volby Block. Úplné blokování může zastavit i Googlebot, Applebot a Bingbot včetně jejich procházení pro vyhledávání. Pokud je prioritou zachovat organickou dohledatelnost, nejde tedy o vhodné nastavení. 1728

Co znamená označení Accountable

Accountable je označení Cloudflare pro provozovatele smíšených crawlerů, kteří splnili – nebo se v konkrétním termínu zavázali splnit – standardy pro oddělení vyhledávacího procházení od využití obsahu pro AI. Prvními označenými provozovateli se staly Apple, Google a Microsoft. 72023

Toto označení neznamená, že web dal plošné svolení k použití obsahu pro AI. Je to naopak podklad, podle něhož Cloudflare dovolí smíšenému crawleru zachovat přístup pro vyhledávání, i když vydavatel zvolil zákaz trénování.

Čtyři požadavky pro status Accountable

Podle Cloudflare musí provozovatel splnit, případně se zavázat splnit, čtyři podmínky:

1. Mechanismus odmítnutí trénování přes robots.txt nebo srovnatelný standard.
2. Možnost odmítnout AI generovaná shrnutí ve vyhledávání, která je k dispozici už nyní nebo je závazně naplánována.
3. Transparentnost na úrovni jednotlivých URL ohledně toho, jak je obsah použit pro vyhledávání a trénování.
4. Veřejné potvrzení, že odmítnutí trénování neodebere běžný přístup pro vyhledávání. 2324

Tyto podmínky mají dát vlastníkům webů možnost nejen vyjádřit svou preferenci, ale také alespoň v principu ověřovat, jak crawler s jejich obsahem nakládá.

Kteří roboti mohou dál indexovat

U Disallow AI Training nerozhoduje jen to, zda crawler patří firmě působící v AI. Rozhodující je, zda jde o smíšený crawler provozovatele s označením Accountable.

Kategorie crawleru	Zacházení při Disallow AI Training
Smíšené vyhledávací crawlery se statusem Accountable, včetně Googlebotu, Applebotu a Bingbotu	Mohou zůstat povoleny pro indexaci ve vyhledávání 1722
Crawlery určené výhradně pro trénování AI	Jsou blokovány 1722
Smíšené crawlery bez statusu Accountable	Jsou blokovány pro trénovací přístup 24

Cloudflare tak nabízí přesnější pravidlo než univerzální blokování AI botů: vyhledávací roli crawleru ponechá jen tehdy, když se jeho provozovatel zavázal respektovat oddělený zákaz trénování.

Google, Apple a Bing: jaké jsou rozdíly

Funkce Bot Preference Sync udržuje soubor robots.txt v souladu s pravidly pro AI boty nastavenými v dashboardu Cloudflare – samostatně pro Search, Agent a Training. 16

U Googlu a Applu jsou trénovací volby oddělené od běžných vyhledávacích robotů:

• Google-Extended je token pro odmítnutí použití obsahu při trénování u Googlu. Je oddělený od Googlebotu, takže zákaz trénování sám o sobě nemá znamenat blokaci indexace ve Vyhledávání Google. 27
• Applebot-Extended plní obdobnou úlohu pro Apple a umožňuje oddělit vyhledávací roli Applebotu od opt-outu z trénování AI. 1727
• Bingbot může v modelu Cloudflare zůstat dostupný pro vyhledávání. Rámec Accountable přitom počítá i se závazky dodat některé funkce v určeném termínu; neznamená tedy automaticky, že každá funkce je u každého provozovatele již dostupná. 723

Výchozí pravidla pro nové domény s reklamou

Cloudflare už dříve oznámil nové výchozí hodnoty platné od 15. září 2026. U nových domén připojovaných ke Cloudflare se na stránkách zobrazujících reklamu ve výchozím nastavení blokují kategorie Training a Agent. 13

Nejde o plošné zablokování vyhledávání na celém webu. Dodané zdroje ale neurčují přesné pravidlo automatického převodu konfigurace pro všechny stávající zákazníky. Majitelé webů by proto měli zkontrolovat nastavení své zóny zvlášť pro Search, Training a Agent, místo aby předpokládali automatickou změnu starší konfigurace.

Praktický závěr pro vydavatele

• Zvolte Disallow AI Training, pokud chcete zachovat dohledatelnost ve vyhledávačích, ale odmítnout využití obsahu pro trénování modelů.
• Širší pravidlo Block používejte jen tehdy, pokud jste připraveni omezit také vyhledávací přístup dotčeného crawleru.
• Nastavení Search, Training a Agent kontrolujte samostatně – zejména u stránek s reklamou a domén, které už mají vlastní pravidla pro boty. 131720

Systém Cloudflare sám o sobě nezaručuje, že každý provozovatel crawleru zveřejněnou preferenci dodrží. Zavádí však srozumitelnější hranici: indexace pro vyhledávání může zůstat povolena, zatímco trénování AI je výslovně odmítnuto, pokud provozovatel crawleru splňuje podmínky Accountable. 724