Cloudflare hjalp OpenAI med at finde hundreder af millioner nye sider til ChatGPT-søgning

Et forsøg mellem Cloudflare og OpenAI har hjulpet OpenAI med at opdage og indeksere flere hundrede millioner nye websider, som ChatGPT kan hente svar fra. Cloudflare deler signaler fra sit netværk om, hvilke sider der er nye, ændrede eller døde. De første resultater blev offentliggjort 15. oktober 2026, skriver Search Engine Journal. Hos AIsearch ser vi nyheden som et skift i datagrundlaget bag ChatGPT, ikke i selve sprogmodellen.

Hvad har Cloudflare og OpenAI testet?

Cloudflare og OpenAI har testet, om signaler fra Cloudflares netværk kan hjælpe OpenAIs søgecrawler med at finde sider, der er værd at indeksere. Cloudflare annoncerede forsøget 8. juli 2026. De første resultater kom 15. oktober i et blogindlæg, som to medarbejdere fra OpenAI var medforfattere på. Ifølge selskaberne har pilotprojektet hjulpet OpenAI med at opdage og indeksere flere hundrede millioner nye sider. Kohorten bag resultatet udgjorde cirka 1 procent af Cloudflares samlede netværk.

Selskaberne nævner tre slags sider som eksempler: brugsanvisningen til en bestemt vaskemaskine, de nyeste regler og gebyrer for pas og en restaurants menukort og åbningstider. Pointen i blogindlægget er, at sådanne sider kan være værdifulde, selv om få andre sites linker til dem. Crawlere finder traditionelt nye sider ved at følge links, så sider uden indgående links bliver let overset. Annonceringen fra juli nævnte de signaler, der skal bruges: hvor nyligt en side er opdateret, kvaliteten af trafikken til sitet, og hvilke ændringer der faktisk er lavet på siden. Oplysningerne kommer fra deltagende websites. Ingen af de to annonceringer fortæller dog, hvem der deltog, eller om de nye sider ligger på deltagernes egne sites.

Hvorfor handler nyheden om datagrundlaget og ikke om ChatGPT?

Cloudflare-forsøget ændrer datagrundlaget bag ChatGPTs websøgning, ikke sprogmodellen eller den flade, brugeren møder. Hos AIsearch skelner vi mellem tre lag i AI-søgning: sprogmodellen, der formulerer svaret, datagrundlaget, som svaret hentes fra, og serveringen, som brugeren ser. ChatGPT er en samtaleassistent med websøgning som redskab, ikke en søgemaskine. Når OpenAIs indeks vokser, får ChatGPT flere sider at vælge imellem, når et spørgsmål kræver opdaterede kilder. Læs mere om de tre lag i vores guide til AI-søgning.

Resultatet skal læses med forbehold. OpenAI vurderer og rangerer de indekserede sider på egen hånd, oplyser selskaberne. En side, som OpenAI finder via Cloudflares signaler, har derfor ingen garanti for at blive citeret. Blogindlægget indeholder heller ingen tal for, hvor ofte de nye sider er blevet citeret i ChatGPT, eller hvor mange besøg de har sendt videre. Indekset er altså vokset, men effekten på trafikken til de enkelte sites er ukendt.

Hvad betyder signalerne for crawlingen af dit site?

Cloudflares signaler skal ifølge selskaberne også få OpenAIs crawler til at bruge færre forgæves forespørgsler på dit site. Blogindlægget peger på tre typiske kilder til spild. Bots forsøger igen og igen at hente filer, der ikke findes på serveren. Nogle sites sender næsten enhver adresse videre til forsiden. Andre adresser fører til kopier af det samme indhold. Ændringssignaler fortæller crawleren, om en side er værd at besøge igen.

Målet er at mindske unødig belastning for Cloudflares kunder, men selskaberne giver ingen tal for crawlvolumen eller serverbelastning. De skriver samtidig, at nye sider i starten kan øge crawlingen, mens siderne bliver vurderet og indekseret. Et site bag Cloudflare kan altså opleve mere aktivitet fra OpenAI først og mindre senere. Mønsteret er ikke dokumenteret, så hold øje med dine egne serverlogs.

Cloudflare og OpenAI tester også signaler, der markerer potentielt skadelige sider. Eksemplet er en falsk loginformular, som en angriber har plantet på én side af et ellers legitimt site. Målet er at markere den ene side frem for hele domænet. De første resultater tyder ifølge blogindlægget på, at signalerne kan hjælpe med at holde den slags sider ude af et indeks.

Sender Cloudflare dit indhold videre til OpenAI?

Cloudflare deler ifølge selskaberne metadata om sider til søgning og opdagelse, ikke sidernes indhold til træning af modeller. Blogindlægget fra 15. oktober slår fast, at et signal om en side ikke giver tilladelse til at tilgå den. Adgangen styres stadig af dine egne indstillinger i robots.txt og hos Cloudflare.

OpenAI skiller søgning og træning ad i to robots.txt-regler. OAI-SearchBot henter sider til ChatGPTs søgefunktion, mens GPTBot indsamler indhold, der kan bruges til at træne modeller. Blokerer et site OAI-SearchBot, kommer det ikke med i ChatGPTs søgesvar, men det kan stadig optræde som navigationslink. Tillader et site begge crawlere, kan OpenAI bruge data fra ét crawl til begge formål. Cloudflare henviser desuden til værktøjet AI Crawl Control, som findes på alle Cloudflare-abonnementer. Værktøjet viser, hvilke AI-tjenester der besøger sitet, og lader dig tillade eller blokere hver enkelt crawler.

AIsearchs crawlermatrix for OpenAI. Kilde: OpenAIs crawlerdokumentation, gengivet af Search Engine Journal 20. oktober 2026.

Hvad betyder pilotprojektet for danske sites?

For danske sites bag Cloudflare kan pilotprojektet blive en ny vej ind i ChatGPTs datagrundlag for sider med få links. Det gælder især den type sider, selskaberne selv bruger som eksempler: vejledninger, praktiske regler og lokale oplysninger som menukort og åbningstider. Den slags sider findes hos mange danske virksomheder og myndigheder, men de bliver sjældent linket til. Det er ikke oplyst, om danske sites var med i kohorten.

Et tænkt eksempel viser mekanismen. En hvidevareforhandler i Odense har lagt brugsanvisninger til 300 vaskemaskiner ud som enkeltsider. Ingen linker til dem, så crawlere har svært ved at finde dem. Med netværkssignaler kan OpenAI i princippet opdage, at siderne findes og bliver opdateret. Spørger en bruger ChatGPT om en fejlkode, kan svaret så bygge på forhandlerens side. Eksemplet er konstrueret og viser ikke en dokumenteret effekt.

Cloudflare skrev i et blogindlæg 1. juli 2026, at muligheden skal gøres bredt tilgængelig i løbet af resten af 2026. Annonceringen fra 15. oktober nævner ingen konkret dato. Næste fase handler ifølge selskaberne om at forbedre, hvordan sider bliver udvalgt, teste hurtigere ændringssignaler og måle, hvad de nye sider giver. Cloudflare arbejder også sammen med OpenAI om at finde ud af, hvordan bedre opdagelse kan omsættes til forretningsresultater.

Et større indeks giver ChatGPT flere sider at vælge imellem, men ingen garanti for, at netop din side bliver citeret.

Hvad kan du gøre nu?

Det vigtigste nu er at sikre, at OpenAIs crawlere kan finde og forstå de sider, du gerne vil have med i ChatGPTs svar. AIsearch anbefaler fem trin, der virker, uanset om dit site er med i Cloudflares forsøg eller ej.

1. Tjek robots.txtSe efter regler for OAI-SearchBot og GPTBot, og beslut bevidst, om du vil være med i søgesvar, træning eller begge dele.
2. Åbn AI Crawl ControlBruger du Cloudflare, så se hvilke AI-tjenester der besøger sitet, og om nogle er blokeret ved en fejl.
3. Ryd op i døde adresserRet 404-fejl, stop med at sende alle ukendte adresser til forsiden, og saml dubletter under én kanonisk adresse.
4. Hold datoerne ærligeOpdater kun ændringsdatoen i dit sitemap, når siden reelt er ændret, så ændringssignaler betyder noget.
5. Mål trafikken fra ChatGPTFølg referrer og serverlogs, fordi UTM-mærker ikke altid følger med ChatGPTs links.

Trin 4 og 5 hænger sammen med to tidligere nyheder. Googles John Mueller har anbefalet sitemap.xml og RSS som signaler til AI-crawlere, som vi beskrev i artiklen om AI-crawlere uden Search Console. ChatGPT droppede i oktober sine UTM-mærker, så AI-trafikken ofte ligner direkte trafik, som beskrevet i vores gennemgang af de manglende UTM-mærker. Ifølge Search Engine Journal mener en analytiker, at en rettelse begyndte at rulle ud 15. oktober 2026.

Ofte stillede spørgsmål om Cloudflares pilot med OpenAI

Kilde: Search Engine Journal, 20. oktober 2026 (Matt G. Southern), som gengiver Cloudflares og OpenAIs blogindlæg fra 15. oktober og Cloudflares annoncering fra 8. juli 2026. Selskaberne har ikke offentliggjort tal for citationer, besøg eller crawlvolumen.

Senest revideret 22. oktober 2026. Artiklen gennemgås løbende, når AI-søgelandskabet flytter sig.