Teknisk SEO
Cloudflare kan blokere Googlebot fra 15. september
Har du slået AI-træning fra i Cloudflare, risikerer du også at blokere Googlebot og forsvinde fra Googles indeks. Der er to ændringer samme dag, og kun den ene handler om annoncer.
Få artiklen opsummeret med:
Indhold
Den 15. september 2026 ændrer Cloudflare, hvordan de behandler crawlere, der både henter indhold til søgeresultater og til at træne AI-modeller. Har du slået AI-træning fra, kan du komme til at blokere Googlebot og dermed forsvinde fra Googles indeks.
Cloudflare ligger foran omkring en femtedel af verdens domæner og afgør, hvilke automatiske besøg der overhovedet når frem til din server.
To ændringer, og kun den ene handler om annoncer
De to bliver konstant blandet sammen, også i den engelsksprogede dækning. Forskellen afgør, om du er berørt.
Ændring 1: nye standardindstillinger for nye domæner
Opretter du et nyt domæne hos Cloudflare, bliver Training og Agent blokeret som standard, men kun på de sider, der viser annoncer. Search forbliver tilladt.
Har du ingen annoncer, sker der ingenting ad den vej.
Ændring 2: den strengeste regel vinder
Crawlere, der udfører flere opgaver, bliver vurderet efter alle deres formål, og den strengeste gældende regel afgør adgangen. Har du slået Training fra, bliver Googlebot, Applebot og BingBot blokeret.
Annoncer spiller ingen rolle her. Det er den ændring, der kan koste dig din synlighed.
Cloudflares egen dokumentation siger det direkte:
Mixed-purpose crawlers that combine Search and Training will also be blocked by all configurations to block AI training, including the legacy "Block AI bots" option.
"All configurations" betyder alle. Også den gamle knap, som mange slog til for et år siden, fordi de ikke ville have deres indhold brugt til AI-træning. Det valg betyder noget andet fra den 15. september, end det gjorde dengang.
Hvorfor rammer en AI-regel Googlebot?
Fordi Googlebot laver begge dele med den samme crawler. Den henter sider til søgeindekset, og det samme indhold bruger Google i sine AI-svar og til modeltræning. Der kommer ikke to besøg forbi. Der kommer ét.
Cloudflare sidder foran din server og ser én forespørgsel. De kan ikke vide, hvad indholdet bliver brugt til bagefter. Derfor er de nødt til at vælge én regel for forespørgslen, og de har valgt den strengeste.
Indstillingen hedder noget med AI, og derfor tror folk, at den kun rører AI. Man kan tro, man kun har blokeret træning, men Googlebot vurderes efter begge sine opgaver og bliver blokeret, selvom Search står som tilladt.
Hvad sker der automatisk, og hvornår
Ændringen kræver ingen handling for at træde i kraft.
| Din situation | Hvad sker der 15. september |
|---|---|
| Du har selv slået Training fra | Googlebot, Applebot og BingBot bliver blokeret |
| Du har slået den gamle "Block AI bots" til | Det samme. Den tæller med |
| Du har ikke rørt indstillingerne | Der sker ingenting |
| Du opretter et nyt domæne efter den 15. | Training og Agent blokeres på sider med annoncer |
Det værste er, at du ikke opdager det
Blokeringen sker i Cloudflares net, før forespørgslen når din server. Din robots.txt bliver aldrig læst, og der står ingenting i serverloggen.
Alt ser normalt ud. Hjemmesiden virker, siderne er online, og ingen får en fejlmeddelelse. Faldet viser sig først, når Google holder op med at genbesøge siderne, og på det tidspunkt leder de fleste efter årsagen et helt andet sted.
For en mindre hjemmeside kan det tage måneder at komme tilbage.
Det sker allerede for nogle
Search Engine Journal beskrev den 4. august en bruger i r/TechSEO, der oplevede det inden fristen. Da vedkommende satte AI Training til Block, fik både Googlebot og Bingbot 403 på sitemappet. Slog han blokeringen fra igen, virkede det.
John Mueller fra Google svarede i tråden og bad om flere oplysninger. Det er ikke en officiel udmelding fra Google, men det er værd at bemærke, at de tog den alvorligt nok til at spørge.
Sådan tjekker du det
-
Åbn AI Crawl Control i Cloudflare
Gå til Security under AI Crawl Control. Der står, hvilke crawlere der er blokeret, og hvilke kategorier de hører til.
-
Se efter Training
Er Training blokeret, eller er den gamle "Block AI bots" slået til, er du i risikogruppen. Det gælder uanset annoncer.
-
Brug fravalget inden den 15.
Cloudflare har lagt en mulighed ind for at bekræfte, at du ikke ønsker ændringen for crawlere, der både henter til søgning og til træning. Den skal bruges inden fristen.
-
Hold øje med indekserede sider
Følg antallet af indekserede sider i Search Console de næste par uger. Det er det første sted, et problem viser sig.
Sig nej til træning uden at miste Google
Vil du stadig ikke have dit indhold brugt til modeltræning, så styr det i robots.txt frem for i Cloudflare.
User-agent: Google-Extended Disallow: / User-agent: GPTBot Disallow: /
Google-Extended styrer brugen til Gemini og til træning uden at røre søgeindekset. Hos OpenAI er GPTBot træning, mens OAI-SearchBot er søgning, og det er den sidste, der får dig med i ChatGPT-svar.
Det virker, fordi forespørgslen når din server, og fordi de selv læser filen. Blokerer du i Cloudflare, bliver robots.txt aldrig læst.
Det er samme princip som resten af teknisk SEO: sørg for, at maskinerne kan komme ind, og styr derefter hvad de må bruge indholdet til.
Ofte stillede spørgsmål
Bliver Googlebot blokeret, hvis jeg ikke har annoncer på min hjemmeside?
Ja, hvis du selv har slået Training fra. Annoncereglen gælder kun nye domæner og kun sider med annoncer. Reglen om crawlere med flere formål gælder alle, der har blokeret Training, uanset om der er annoncer på siden.
Sker der noget, hvis jeg ikke har rørt indstillingerne?
Nej. Har du ikke selv slået Training eller Block AI bots til, sker der ingenting på et eksisterende domæne.
Hvorfor bliver Googlebot ramt af en regel om AI-træning?
Fordi Googlebot laver begge dele med den samme crawler. Den henter sider til søgeindekset, og det samme indhold bruger Google i sine AI-svar og til træning. Cloudflare ser ét besøg og kan ikke se, hvad indholdet bagefter bliver brugt til, så de vurderer bot'en efter alle dens formål og lader den strengeste regel gælde.
Hvordan opdager jeg, om det er sket?
Ikke på hjemmesiden. Blokeringen sker i Cloudflares net, før forespørgslen når din server, så der står ingenting i serverloggen, og din robots.txt bliver aldrig læst. Tjek i stedet AI Crawl Control i Cloudflare, og hold øje med indekserede sider i Search Console.
Hvordan siger jeg nej til AI-træning uden at miste Google?
Brug robots.txt i stedet for Cloudflare. Google-Extended styrer brugen til Gemini og træning uden at røre søgeindekset, og hos OpenAI er GPTBot træning, mens OAI-SearchBot er søgning. Det virker, fordi forespørgslen når din server, og fordi de selv læser filen.
Kilder
- Cloudflare: Your site, your rules: new AI traffic options for all customers, 1. juli 2026.
- Cloudflare Developers: Block AI bots.
- Search Engine Journal: Report That Cloudflare AI Bot Blocking Prevents Googlebot From Indexing Sites, 4. august 2026.