15.9.2026 alkaen Cloudflaren oletus uusille verkkotunnuksille estää Training ja Agent robotit sivuilla, joilla näytetään mainoksia, mutta sallii Search liikenteen. Sivuston omistaja voi hallita Search , Training ja Agent liikennettä erikseen: sallia sen, estää sen vain mainossivuilla tai estää sen kaikkialla sivusto...
JulkaisijaMuokattu mallilla GPT-5.6 TerraKuvat luotu mallilla GPT Image 2
Research answer

Create a landscape editorial hero image for this Studio Global article: What default rules did Cloudflare begin enforcing in September 2026 for AI training and agent crawlers on millions of websites, which new an. Article summary: On September 15, 2026, Cloudflare began default-blocking automated traffic classified as AI Training or Agent on ad-bearing pages, while continuing to allow Search crawlers. The change is a default for newly onboarded do. Topic tags: general, documentation, general web, user generated. Style: premium digital editorial illustration, source-backed research mood, clean composition, high detail, modern web publication hero. Use reference image context only for broad subject, composition, and topical grounding; do not copy the exact image. Avoid: logos, brand marks, copyrighted characters, real person likenesses, fake screenshots, UI text, readable text, watermarks,
Cloudflaren 15.9.2026 voimaan tullut käytäntö erottaa perinteisen hakukoneindeksoinnin ja muun tekoälykäytön aiempaa selvemmin. Uusilla Cloudflareen liitettävillä verkkotunnuksilla Training- ja Agent-luokkaan kuuluva liikenne estetään oletuksena sivuilla, joilla näytetään mainoksia. Search-luokkaan kuuluva liikenne jää oletuksena sallituksi. 2
15
Erottelu on tärkeä julkaisijoille ja muille sivustonomistajille, jotka haluavat säilyttää hakukonenäkyvyyden ja siitä tulevan liikenteen, mutta rajoittaa bottien pääsyä sisältöön mallien koulutusta tai reaaliaikaisia tekoälyavustajan pyyntöjä varten.
Uusi oletus koskee Cloudflareen uutena liitettäviä verkkotunnuksia. Kun Cloudflare tunnistaa sivulla mainoksia, se estää kaksi automatisoidun liikenteen luokkaa:
Search on edelleen sallittu. Cloudflaren määritelmässä kyse on sisällön indeksoinnista, jotta palvelu voi vastata sitä koskeviin kysymyksiin myöhemmin. Cloudflare liittää tähän malliin odotuksen sivustolle palaavasta viittausliikenteestä tai muusta oikeudenmukaisesta korvauksesta. 1
3
Kyse ei siis ole kaiken tekoälyliikenteen kiellosta. Oletus koskee vain Training- ja Agent-käyttöä sekä vain sivuja, joilla on mainoksia. 2
15
Cloudflaren virallisten ohjeiden mukaan oletus koskee verkkoon uutena liitettäviä verkkotunnuksia. 2
15 Käyttöönottoa koskevan uutisoinnin mukaan piiriin kuuluvat myös nykyisten asiakkaiden lisäämät uudet sivustot sekä Free-tason tilit, joiden asetuksia ei ole muutettu käsin.
23
Nykyisten asiakkaiden ei silti pidä olettaa, että jokainen jo käytössä oleva verkkotunnus siirtyy automaattisesti samaan käytäntöön. Lopputulos riippuu verkkotunnuksen käyttöönotosta, tilauksesta ja aiemmista asetuksista. Varmin tapa on tarkistaa kyseisen sivuston AI-crawler-asetukset Cloudflaren hallintapaneelista. 2
3
Cloudflare ei käsittele kaikkea tekoälyyn liittyvää indeksointia yhtenä ryhmänä, vaan luokittelee liikenteen toiminnan perusteella. Kolmea luokkaa voi säätää erikseen: 1
3
| Luokka | Mitä se tarkoittaa | Uusien verkkotunnusten oletus mainoksia sisältävillä sivuilla |
|---|---|---|
| Search | Sisällön indeksointi myöhempää kysymyksiin vastaamista varten | Sallittu |
| Training | Sisällön kerääminen mallin kouluttamiseen tai hienosäätöön | Estetty |
| Agent | Käyttäjän puolesta reaaliajassa toimiva automaatio | Estetty |
Jokaiselle luokalle voi valita yhden kolmesta toimintatavasta:
Tämä antaa sivuston omistajalle tarkemman hallinnan. Esimerkiksi hakurobotit voi pitää sallittuina, mutta Training-liikenteen voi estää koko sivustolta – tai rajoituksen voi kohdistaa vain mainoksilla rahoitettuihin sivuihin.
Robotin luokitus ei välttämättä rajoitu yhteen käyttötarkoitukseen. Cloudflaren mukaan robotteja, jotka yhdistävät Search- ja Training-toimintaa, arvioidaan kaikkien niiden toimintojen perusteella. Käyttöoikeuden ratkaisee tällöin tiukin soveltuva sääntö. 2
6
15
Tällä voi olla merkittävä vaikutus: jos sivusto estää Training-liikenteen, robotti, jonka Cloudflare tulkitsee sekä Search- että Training-robotiksi, voi menettää myös tavallisen hakurobotin pääsynsä. Cloudflaren ohjeissa ja käyttöönottoa käsittelevässä uutisoinnissa tällaisina monikäyttöisinä robotteina mainitaan Googlebot, Applebot ja BingBot. 2
6
Pelkkä Search-luokan salliminen ei siis välttämättä turvaa robotin pääsyä, jos sen toiminta luokitellaan samalla Training-käytöksi. Ennen koko sivuston kattavaa Training-estoa kannattaa arvioida mahdollinen vaikutus hakukoneindeksointiin. 2
4
Cloudflaren mukaan myös AI-koulutuksen estävät määritykset, mukaan lukien vanha “Block AI bots” -asetus, koskevat Search- ja Training-toimintaa yhdistäviä robotteja. 2 Siksi asetukset kannattaa tarkistaa erityisesti sivustoilla, joilla vanha laaja esto otettiin käyttöön ajatuksella, että se koskisi vain muuta kuin hakuliikennettä.
Syyskuun käyttöönottoa käsittelevän uutisoinnin mukaan uudempi “Disallow AI Training” -vaihtoehto on tarkoitettu ilmaisemaan koulutuskielto niin, että Googlebot, Applebot ja BingBot voivat edelleen hakea sisältöä hakukäyttöön, jos robotti on merkitty “Accountable”-luokkaan. Koska toiminta ja siirtymätapa voivat riippua valitusta asetuksesta, ylläpitäjän kannattaa tarkistaa hallintapaneelissa näkyvä nykyinen sääntö sen sijaan, että luottaisi vanhan kytkimen nimeen. 4
Taustalla on julkaisijoiden huoli verkkosisällön arvonjaosta. Perinteisesti hakukone indeksoi sivuja ja voi ohjata lukijoita takaisin alkuperäiseen lähteeseen. Generatiivinen tekoäly voi sen sijaan käyttää sisältöä mallin kouluttamiseen tai esittää haetun vastauksen omassa käyttöliittymässään, jolloin alkuperäiselle sivustolle voi tulla vähemmän suoraa viittausliikennettä.
Cloudflare kuvaa Search-liikennettä liikenteeksi, josta julkaisijan pitäisi saada viittauksia tai vastaavaa korvausta. Training- ja Agent-luokat taas kuvaavat sisällön hyödyntämistä eri tavoin. 1
3 Hallintatyökalujen tarkoitus on antaa omistajalle mahdollisuus säilyttää arvokkaaksi katsomansa automaatio ja rajoittaa muuta liikennettä.
Keskeinen kysymys ei Cloudflaren mallissa ole vain se, onko robotti “tekoälyä”. Olennaista on, tukeeko sen toiminta sisällön löydettävyyttä ja palauttaako se arvoa sivustolle, vai kuluttaako se sisältöä pääasiassa mallikoulutukseen tai reaaliaikaisiin tekoälytehtäviin. 1
3
Ennen asetusten muuttamista kannattaa tarkastella seurauksia käyttötarkoitus kerrallaan:
Cloudflaren syyskuun oletusasetukset lisäävät julkaisijoiden päätösvaltaa, mutta monikäyttöisten robottien luokittelu tekee asetuksista myös SEO-päätöksen – ei vain tekoälypolitiikkaa.
Studio Global AI
This page includes a source-backed answer you can continue inside Studio Global.
15.9.2026 alkaen Cloudflaren oletus uusille verkkotunnuksille estää Training ja Agent robotit sivuilla, joilla näytetään mainoksia, mutta sallii Search liikenteen.
15.9.2026 alkaen Cloudflaren oletus uusille verkkotunnuksille estää Training ja Agent robotit sivuilla, joilla näytetään mainoksia, mutta sallii Search liikenteen. Sivuston omistaja voi hallita Search , Training ja Agent liikennettä erikseen: sallia sen, estää sen vain mainossivuilla tai estää sen kaikkialla sivustolla.
Keskeinen varoitus koskee monikäyttöisiä robotteja: jos robotti luokitellaan sekä hakuun että mallikoulutukseen, koulutusrajoitus voi estää myös sen hakurobottiliikenteen.