
Kort fortalt
Google offentliggjorde 17. november 2026 guiden Allow Google-Agent traffic. Google-Agent browser og udfører handlinger for en bruger, og som user-triggered fetcher ignorerer den generelt robots.txt. Verifikation sker på tre signaler: User-Agent-headeren, IP-listen user-triggered-agents.json og, for en del af forespørgslerne, en Web Bot Auth-signatur. Listen fra 16. november har 20 præfikser, og af 70.016 IPv4-adresser ligger 93,6 % i én /16-blok. Google oplyser ikke, hvor meget trafik agenten sender, eller hvor stor en andel der signeres.
Vil du have Googles AI-agent ind på dit site, skal den lukkes ind i firewall, CDN eller bot-beskyttelse, ikke i robots.txt, som den generelt ignorerer. Verificér på user agent og IP-liste sammen, lad verificerede forespørgsler slippe for CAPTCHA på de sider, der skal virke, og pas på rate limits pr. IP. Vil du holde den ude, er det det samme lag, du skal blokere i.
Hvad Google offentliggjorde 17. november
Google-Agent er navnet på de agenter, Google kører på egen infrastruktur, når de navigerer på nettet og udfører handlinger for en bruger. Agenten kom på Googles liste over user-triggered fetchers 20. marts 2026. Det nye er guiden Allow Google-Agent traffic, som Google lagde ud 17. november 2026. Den handler ikke om, hvad agenten er, men om hvad du skal ændre i dit sikkerhedslag, for at den kan komme igennem.
Guiden har fire regler: Tjek at User-Agent-headeren indeholder Google-Agent. Tjek at IP-adressen står i filen user-triggered-agents.json. Verificér signaturen, hvis forespørgslen er signeret med Web Bot Auth. Og lad verificerede forespørgsler springe bot-challenges over.
Derefter kommer seks fejlkilder, hvis agenten stadig bliver blokeret: regelrækkefølge, interaktive challenges, handlinger dybere inde på sitet (søgning, filtre, kurv, booking og de API-kald, der ligger under), rate limits pr. IP, forældede IP-lister og proxyer, der ikke sender den oprindelige IP og headerne videre.
Guiden handler ikke om placeringer. Den har intet med November 2026 core update at gøre, som Google startede 10. november, selv om de to ting lander i samme uge.
Hvorfor robots.txt ikke er knappen
De fleste site-ejere styrer Googles crawlere i robots.txt. Det virker ikke her. På Googles side om user-triggered fetchers står det direkte: fordi hentningen er bestilt af en bruger, ignorerer disse fetchere generelt robots.txt. Google-Agent står på den liste.
Det betyder, at beslutningen om agenten ikke ligger i en tekstfil, du selv redigerer, men i firewall, CDN eller bot-beskyttelse. På mange mindre sites er det lag sat op én gang af en udvikler eller en hostingudbyder og ikke rørt siden. Og guiden beskriver kun, hvordan du lukker agenten ind. Hvordan du holder den ude, står der ikke noget om.
Samme side advarer også om, at user agent-strengen kan forfalskes. En regel, der kun kigger efter ordet Google-Agent, åbner altså for alle, der skriver det i deres header. User agent og IP skal tjekkes sammen.
IP-listen: 20 præfikser, men én blok fylder næsten det hele
Jeg hentede user-triggered-agents.json 18. november 2026. Filen er genereret 16. november og indeholder 20 præfikser: 12 IPv4 og 8 IPv6. Lagt sammen dækker IPv4-præfikserne 70.016 adresser, og 65.536 af dem ligger i én blok, 136.122.0.0/16.
Det har to praktiske konsekvenser. Den ene er, at det er nemt at lave en allow-regel på hånd, og lige så nemt at den bliver forkert, når Google ændrer filen. Google opdaterer sine IP-filer dagligt, og guidens femte fejlkilde er netop forældede IP-regler. Den anden er, at mange brugeres agenter deler de samme adresser. Guiden skriver selv, at samtidige forespørgsler fra flere brugere går ud gennem den samme pulje.
De to fejl, der rammer et B2B-site
Det meste af guiden er skrevet til webshops og bookingsites med kurv og API-kald. På et typisk B2B- eller service-site uden kurv er der især to steder, agenten falder.
Rate limit pr. IP
En regel som "maks. 60 forespørgsler pr. minut pr. IP" er billig og effektiv mod scrapere. Men når agenter for mange brugere deler én adressepulje, rammer grænsen dem alle sammen. Guiden beder dig undtage verificerede Google-Agent-adresser fra den slags regler. Det er det punkt, jeg ville være mest forsigtig med: du flytter tilliden fra din egen grænse til Googles egne kontroller, og guiden beskriver ikke, hvad de kontroller er.
CAPTCHA på kontaktformularen
Guiden nævner udtrykkeligt CAPTCHA-widgets, der først dukker op ved søgning eller indsendelse af en formular. På et B2B-site er kontaktformularen og bookingsiden det eneste sted, der giver penge. Hvis en bruger beder en agent om at booke et møde eller sende en forespørgsel, er det dér, den bliver stoppet, selv om resten af sitet er åbent.
Hvor ofte det sker, findes der ikke danske tal for. PPC Land gengiver to datapunkter, der giver en idé om skalaen: Blends test, hvor bot-beskyttelse stoppede selskabets shoppingagent hos 29 af 200 forhandlere, og Arkose Labs' opgørelse fra oktober, hvor kun 2,3 % af de agent-sessioner, de vurderede som legitime, havde en gyldig Web Bot Auth-signatur. Det sidste forklarer, hvorfor guiden stadig læner sig op ad IP-listen og ikke på signaturer alene.
Rækkefølgen, jeg ville bruge
Min holdning er, at et B2B-site uden kurv ikke har grund til at blokere Google-Agent, men heller ikke til at åbne for alt, der kalder sig det. Rækkefølgen:
- Se om den kommer. Søg efter Google-Agent i access-loggen eller CDN-loggen for de sidste 30 dage, og notér statuskoderne. Kommer den ikke, er der intet at haste med.
- Tjek leverandøren først. Guiden siger selv, at nogle CDN'er og bot-tjenester allerede verificerer agenten. Så er det en indstilling, ikke en regel, du skal skrive.
- Byg reglen på user agent og IP sammen. Aldrig user agent alene. Placér den før brede regler for datacentre, managed bot rules og kategori-blokeringer af AI-agenter.
- Hent IP-listen automatisk. Fra Googles egen URL, dagligt, ikke en kopi i et regneark.
- Undtag kun de sider, der skal virke. Kontakt, booking og de endpoints, formularerne poster til. Resten kan beholde sine grænser.
- Tjek proxy-headerne. Står der en load balancer foran, skal den sende den oprindelige IP og User-Agent videre, ellers matcher reglen aldrig.
Én ting at gøre i denne uge
Søg efter Google-Agent i jeres access-log for de sidste 30 dage og se, hvilke statuskoder den har fået på kontakt- og bookingsiderne. En 403 eller en challenge-side dér er en henvendelse, der aldrig kom frem, og den finder du ikke i Analytics.
Vil du have et par ekstra øjne på firewall- og CDN-reglerne, kan du booke 20 min. afklaring.