Du har brugt måneder på at optimere din hjemmeside. Dine søgeord sidder rigtigt, dine backlinks er stærke, og du rammer side 1 i Google på dine vigtigste termer. Og alligevel dukker du aldrig op, når nogen spørger ChatGPT eller Perplexity om det, du sælger.

Problemet er sandsynligvis ikke dine rankings. Det er, at AI-crawlerne slet ikke har adgang til dit indhold.

AI-søgning kræver adgang – ikke kun gode rankings

Klassisk SEO handler om at overbevise Googles algoritme om, at dit indhold er det bedste svar på en søgeforespørgsel. AI-søgning virker anderledes. Her handler det om, at en sprogmodel har kunnet crawle og indeksere dit indhold, inden den overhovedet kan bruge det som kilde.

Googlebot og Bingbot kender alle. Men de store AI-platforme har deres egne crawlere: OpenAI bruger GPTBot, Anthropic bruger ClaudeBot, Google bruger Google-Extended til sine AI-produkter, og Perplexity har PerplexityBot. Hvis disse bots ikke kan besøge din hjemmeside, eksisterer du simpelthen ikke i deres vidensgrundlag.

Crawling er forudsætningen for alt andet. Det nytter ikke noget at have nok det bedste indhold om et emne, hvis AI-platformene aldrig har fået lov til at læse det.

Blokerer danske webhosts AI-bots?

Lad os slå det fast med det samme: Nej, de fleste danske webhosts blokerer ikke AI-bots som standard.

Udbydere som One.com, Simply, Webhosting.dk og lignende er teknisk neutrale. De serverer dit indhold til alle crawlere, der kommer og beder om det. Der er ikke nogen aktiv politik om at afskærme AI-selskabernes bots, og der er heller ingen grund til at forvente det.

Det betyder dog ikke, at dit setup er rent. For problemet sidder sjældent hos webhosten. Det sidder i lagene oven på.

Den reelle synder: Cloudflare og sikkerhedslag

Langt de fleste websites af en vis størrelse benytter i dag et CDN eller en WAF – et Content Delivery Network eller en Web Application Firewall. Og her er Cloudflare dominerende. Virksomheden sidder reelt set foran en enorm del af det globale web og fungerer som et filter på al trafik ind og ud.

Cloudflare tilbyder en feature, der hedder “Block AI Bots”, som med et enkelt klik blokerer alle verificerede AI-crawlere samt en række uverificerede bots, der opfører sig på samme måde.

Funktionen er tilgængelig via Cloudflares Security Settings og er teknisk set et aktivt tilvalg – men i praksis kan den ende aktiveret uden at webstedsejeren er bevidst om det, eksempelvis fordi en webudvikler har sat det op, eller fordi det er slået til som led i en bredere sikkerhedsopsætning.

Ud over den direkte blokering er der også Cloudflares bot-scoringssystem, firewall-regler og rate limiting, der kan ramme AI-crawlere utilsigtet. En crawler, der henter mange sider hurtigt, kan ligne et angreb og blive blokeret på samme måde.

Sådan bliver AI-bots blokeret i praksis

Der er fire primære steder, hvor blokeringen kan ske:

robots.txt er den klassiske mekanisme. Filen fortæller alle crawlere, hvilke dele af sitet de må og ikke må besøge. Mange sites har i den seneste tid begyndt at tilføje eksplicitte blokeringer af GPTBot, ClaudeBot og lignende – nogle bevidst, andre fordi de har kopieret en robots.txt-skabelon fra internettet uden at tænke over konsekvenserne. En analyse fra Ahrefs af circa 140 millioner websites viser, at GPTBot allerede er den mest blokerede AI-bot, og at blokeringsraten for ClaudeBot er steget markant over det seneste år.

Firewall-regler i Cloudflare eller lignende systemer kan blokere specifikke User Agents, hvilket er den streng, som en bot identificerer sig med. Mange sætter regler op, der blokerer alt, hvad der ikke ligner en rigtig browser, og rammer dermed utilsigtet legitime crawlere.

Bot protection og rate limiting er features, der er designet til at beskytte mod DDoS-angreb og scrapers, men som ikke altid skelner fint nok mellem et angreb og en velopdraget crawler fra OpenAI.

WordPress-plugins er en særlig fælde. Sikkerhedsplugins som Wordfence eller All In One Security har funktioner til at blokere “dårlige bots”, og definitionen af hvad der er dårligt varierer fra plugin til plugin. Nogle plugins er begyndt at inkludere AI-crawlere i den kategori.

Konsekvensen: Du forsvinder fra AI-svar

Resultatet af blokeringen er enkelt og brutalt: du eksisterer ikke i AI-svar.

Når en bruger spørger ChatGPT om den bedste løsning på et problem, du ellers er specialist i, bliver du ikke citeret. Når Perplexity samler en artikel om emner inden for dit felt, er du ikke en kilde. Og i Google AI Overviews – der i stigende grad vises øverst i søgeresultaterne – er du usynlig.

Du kan ranke nummer et i det organiske søgeresultat og stadig være fuldstændig fraværende i det AI-genererede svar direkte over dig.

Det er et nyt lag af usynlighed, som klassisk SEO-tænkning ikke tager højde for.

Hvorfor det her bliver et større problem i 2026

Tendensen peger kun én vej. Ahrefs’ data viser, at antallet af aktive AI-bots er fordoblet siden august 2023, og at blokeringsraterne stiger støt. Flere indholdsskabere og publishers – især inden for nyheder og medie – vælger aktivt at blokere AI-crawlere som en protest mod, at AI-selskaberne bruger deres indhold til træning uden kompensation.

Det er en legitim debat. Men for den gennemsnitlige danske virksomhed er regnestykket et andet. AI er ved at blive en primær kanal for informationssøgning og produktopdagelse, særligt for brugere, der ønsker et sammenfattet svar frem for ti blå links. At være usynlig i den kanal er ikke en neutral position – det er et konkurrencemæssigt tab.

Jo flere sites der blokerer, desto mere fremtrædende bliver dem, der ikke gør. Det skaber en åbning for virksomheder, der aktivt forholder sig til AI-synlighed nu.

Hvad du bør gøre – praktisk tjekliste

1. Tjek din robots.txt

Gå til ditdomæne.dk/robots.txt og se, om du har regler, der blokerer GPTBot, ClaudeBot, Google-Extended, PerplexityBot eller en bred Disallow: / for alle bots. Hvis du bruger en skabelon, du ikke selv har skrevet, så læs den grundigt igennem.

2. Tjek dine Cloudflare-indstillinger

Hvis dit site kører bag Cloudflare, så log ind på dashboardet og gå til Security Settings. Se om “Block AI Bots” er aktiveret – og tag stilling til, om det er et bevidst valg. Tjek også firewall-regler og bot protection-indstillinger for utilsigtede blokeringer af kendte crawlere.

3. Whitelist de vigtigste bots

Overvej at tillade de primære AI-crawlere eksplicit i robots.txt, også selvom du har en bred blokeringspolitik. De mest relevante User Agents er i skrivende stund: GPTBot, ClaudeBot, Google-Extended, PerplexityBot og Applebot-Extended.

4. Balancer performance og synlighed

Rate limiting og bot protection er ikke noget, du bare slår fra. Men du kan konfigurere dem til at undtage verificerede crawlere, der kommer fra kendte IP-ranges. Cloudflares dokumentation beskriver, hvordan verificerede bots håndteres forskelligt fra uverificerede.

5. Monitorer løbende

AI-landskabet ændrer sig hurtigt. Nye bots dukker op, og blokeringsregler, du satte op for et år siden, kan have utilsigtede konsekvenser i dag. Byg en rutine for at gennemgå dit tekniske setup med AI-crawlability i baghovedet.

Konklusion

Din hosting er sandsynligvis ikke problemet. Det er din Cloudflare-konfiguration, din robots.txt, dine sikkerhedsplugins eller en kombination af alle tre.

AI-synlighed er ikke noget, der sker automatisk. Det er et aktivt valg om at lade de rigtige bots ind – og i 2026 er det et valg, der har direkte forretningsmæssige konsekvenser. Mens dine konkurrenter måske ubevidst blokerer sig selv ude fra AI-svar, kan du aktivt sikre dig en plads i det nye søgelandskab.