Google har annonceret planer om at indføre en fælles kontrol i robots.txt, som skal gøre det muligt for hjemmesideejere at angive, om deres indhold må bruges til træning af AI-modeller.
Det betyder, at man fremover skal kunne angive sine præferencer ét sted og på den måde give en fælles instruktion til flere deltagende AI-udbydere.
Men funktionen er endnu ikke klar. Google har meldt ud, at de sigter mod at understøtte den nye kontrol i 2027. Der er endnu ikke offentliggjort en konkret dato.
Hvad er robots.txt?
Robots.txt er en fil, der ligger på hjemmesidens server. Den bruges til at give søgemaskiner og andre automatiserede tjenester instruktioner om, hvilke dele af hjemmesiden de må crawle.
Filen kan blandt andet bruges til at styre, hvilke områder af hjemmesiden søgemaskiner som Googlebot må hente information fra.
Google har allerede en særskilt kontrol kaldet Google-Extended, som hjemmesideejere kan bruge til at styre, om deres indhold må anvendes til træning af Googles AI-modeller.
Den nye udmelding handler om at gøre den type kontrol mere fælles på tværs af AI-udbydere.
Hvad har Google annonceret?
Den 30. oktober 2026 offentliggjorde Google, at de planlægger at understøtte et fælles AI-træningssignal i robots.txt.
Løsningen bygger på arbejde fra AIPREF-arbejdsgruppen under Internet Engineering Task Force (IETF).
I stedet for at skulle administrere særskilte instruktioner til hver enkelt AI-udbyder skal hjemmesideejere kunne bruge et fælles såkaldt policy token i robots.txt.
Det skal gøre det muligt at angive en overordnet præference for, om hjemmesidens indhold må bruges til AI-træning hos de udbydere, der understøtter signalet.
Google har beskrevet, at hvis en hjemmeside bruger det fælles signal til at fravælge træning, og der ikke samtidig er angivet en særskilt tilladelse via Google-Extended, vil Google behandle det, som om Google-Extended er blokeret.
Andre AI-udbydere vil kunne håndtere signalet på tilsvarende vis.
Hvad betyder det for din hjemmeside?
Den nye kontrol skal gøre det lettere at tage stilling til, hvordan indholdet på hjemmesiden må bruges i forbindelse med udvikling og træning af AI-modeller.
Det er især relevant for virksomheder, der har meget eget indhold på hjemmesiden, eksempelvis artikler, vejledninger, produktbeskrivelser eller andet materiale, som de ønsker at have kontrol over.
Det er dog vigtigt at skelne mellem AI-træning og andre former for adgang til hjemmesidens indhold. Googles annoncering handler specifikt om en fælles kontrol af AI-træningspræferencer.
Google oplyser samtidig, at de eksisterende virksomhedsspecifikke kontroller fortsat vil fungere ved siden af det fælles signal. Det betyder, at man fortsat vil kunne bruge særskilte instruktioner til eksempelvis Google.
Hvornår kommer funktionen?
Google har meldt ud, at de sigter mod at understøtte den fælles kontrol sammen med andre AI-udbydere i løbet af 2027.
Der er endnu ikke meldt en konkret lanceringsdato ud.
Google beskriver desuden løsningen som et forslag, der fortsat skal udvikles og standardiseres gennem arbejdet i IETF. Derfor er der endnu ikke tale om en færdig, bredt implementeret standard, som hjemmesideejere kan tage i brug.
Indtil videre er det derfor ikke nødvendigt at ændre hjemmesidens robots.txt-fil på baggrund af den nye udmelding.
Hvad skal du være opmærksom på?
Det er værd at følge udviklingen, hvis du har en hjemmeside med indhold, som du ønsker at beskytte eller have kontrol over brugen af.
Når Google og de øvrige AI-udbydere melder mere ud om den fælles kontrol, bliver det muligt at tage stilling til, hvordan den skal bruges på den enkelte hjemmeside.
Indtil da gælder de eksisterende muligheder, herunder Googles Google-Extended-kontrol.
Hos Web og linjer følger jeg udviklingen, så hjemmesiderne kan blive håndteret korrekt, når der kommer nye muligheder og konkrete retningslinjer.
