Cloudflare blokerer AI-crawlere som standard: Sådan sikrer din webshop synlighed i ChatGPT

Fra den 15. september 2026 har Cloudflare ændret sine standardindstillinger for, hvordan AI-bots må tilgå hjemmesider bag firmaets netværk. På sider med annoncer blokeres bots, der bruges til AI-træning og til såkaldte agentopgaver, som standard, mens bots der indekserer til klassisk søgning fortsat får adgang. Ændringen rammer alle nye kunder, nye sites hos eksisterende kunder og gratiskunder, der ikke selv har ændret deres indstillinger inden datoen. Cloudflare driver en stor del af internettets infrastruktur, og mange danske webshops kører bag Cloudflares netværk uden nødvendigvis at vide det.

Cloudflare opdeler nu AI-bots i tre kategorier: søgning, træning og agent. Søgekategorien dækker bots, der henter indhold for at vise det i klassiske søgeresultater, mens træningskategorien dækker bots, der indsamler data til at træne sprogmodeller, og agentkategorien dækker bots, der henter en side i realtid på vegne af en bruger, for eksempel når ChatGPT eller Gemini besøger en produktside for at svare på et spørgsmål. Ifølge Cloudflares egen blog vil bots, der kombinerer flere formål, som Googlebot, følge den mest restriktive regel, hvilket betyder, at de blokeres for træningsformål, selvom de fortsat må indeksere til søgning.

Ændringen kommer, mens flere danske webshops begynder at interessere sig for, om deres produkter overhovedet bliver nævnt, når kunder spørger ChatGPT eller Perplexity om anbefalinger. Hvis en webshops Cloudflare-indstillinger utilsigtet blokerer de bots, som AI-tjenester bruger til at hente sideindhold i realtid, kan webshoppen blive usynlig i AI-svar, selvom den fortsat rangerer fint i Google. Fordi ændringen sker automatisk for kunder, der ikke selv har taget stilling, risikerer nogle webshops at blive blokeret uden at vide det.

Store danske webshops med eget it-team eller bureau vil typisk opdage og justere indstillingerne før fristen, fordi de allerede overvåger deres tekniske opsætning tæt. Mindre danske webshopejere, der har sat Cloudflare op for år tilbage og aldrig rørt indstillingerne siden, er dem der reelt rammes af standardændringen, fordi de sjældent tjekker indstillinger for bot-adgang. Da ændringen gælder globalt og ikke er knyttet til EU-lovgivning, gælder den for danske webshops på præcis samme vilkår som alle andre steder i verden.

Log ind på dit Cloudflare-dashboard, og gå til indstillingerne for bot-styring for at se, hvordan din side aktuelt håndterer søge-, trænings- og agentbots. Beslut bevidst, om du vil give agentbots adgang, hvis du ønsker, at dine produkter skal kunne findes og citeres i AI-svar. Test derefter, om dine vigtigste produktsider rent faktisk kan hentes af de bots, du har valgt at tillade, i stedet for kun at stole på tallene i dashboardet. Gennemgå desuden din robots.txt for at sikre, at den ikke modsiger de indstillinger, du har lavet i Cloudflare.

Cloudflare har samtidig lanceret nye værktøjer, der skal gøre det nemmere at give adgang selektivt og i nogle tilfælde kræve betaling af AI-selskaber for adgang til indhold. For danske webshops betyder det, at spørgsmålet om, hvem der må crawle sitet, ikke længere kun handler om sikkerhed, men også om hvor synlig webshoppen skal være i den næste generation af AI-drevet søgning.