Google-Agent toelaten: 6 plekken waar je firewall blokkeert

Redactie Marketing Divisie
in
Netwerkkabels in een patchpaneel: de poorten waar een firewall verkeer van Google-Agent kan blokkeren

Google-Agent toelaten is een concrete taak geworden voor elke website met een firewall of botbescherming. Op 17 november 2026 werkte Google zijn handleiding voor het toestaan van Google-Agent bij. Google-Agent is de naam voor AI-agents op Google-infrastructuur die namens een gebruiker websites bezoeken en daar acties uitvoeren, zoals zoeken, filteren of een product in het winkelmandje leggen. Google noemt daarin zes plekken waar dat verkeer vaak toch wordt tegengehouden, ook als je het in principe hebt toegestaan.

Voor webshops, boekingssites en dienstverleners met een offerteformulier is dat relevant. Blokkeert je beveiliging een agent, dan kan die de taak voor de gebruiker niet afmaken en zoekt de gebruiker het ergens anders. Hieronder lees je wat Google-Agent is, hoe je het herkent en welke zes instellingen je samen met je webbouwer of hostingpartij controleert.

Wat is Google-Agent?

Google-Agent is volgens Google (handleiding van 17 november 2026) de naam die agents op Google-infrastructuur gebruiken om op verzoek van een gebruiker het web te navigeren en acties uit te voeren. Het is dus geen crawler die pagina's indexeert, maar een assistent die namens één persoon iets op je site probeert te doen.

Google rekent Google-Agent tot de user-triggered fetchers. Over die groep schrijft Google (pagina bijgewerkt op 19 augustus 2026) dat ze robots.txt-regels doorgaans negeren, omdat een gebruiker zelf de opdracht gaf. Een regel in je robots.txt bepaalt dus niet of een agent je site kan gebruiken. Wil je juist voorkomen dat je content wordt gebruikt om AI-modellen te trainen, dan is dat een ander onderwerp, dat we behandelen in AI-training blokkeren via robots.txt. Wat een AI-agent in het algemeen is, lees je in wat is een AI-agent.

Waarom Google-Agent toelaten belangrijk is voor je website

Wie Google-Agent blokkeert, sluit klanten uit die een AI-assistent laten zoeken, vergelijken of boeken. De agent krijgt dan een CAPTCHA of foutmelding en kan de taak niet afmaken. Voor een webshop of boekingssite is dat een gemiste bestelling, terwijl je dat in je gewone statistieken niet direct terugziet.

Hoe vaak het misgaat, is voor Nederland nog niet gemeten. Er zijn wel twee indicaties uit het buitenland, beide genoemd door PPC Land op 17 november 2026:

  • Uit een audit van Blend onder 200 Britse en Amerikaanse retailers bleek dat botbescherming de AI-shoppingagent van Blend bij 29 van die retailers blokkeerde.

  • Arkose Labs meldde in oktober 2026 dat slechts 2,3 procent van de AI-agentsessies die het als legitiem beoordeelde een geldige Web Bot Auth-handtekening had. Herkenning op basis van handtekeningen staat dus nog in de kinderschoenen.

Het zijn Britse en Amerikaanse cijfers van derde partijen, geen Nederlandse data. Ze laten wel zien dat blokkades in de praktijk voorkomen bij gewone webwinkels met standaard beveiliging.

Hoe herken je verkeer van Google-Agent?

Je herkent Google-Agent aan twee kenmerken die je samen controleert: de User-Agent bevat de tekst Google-Agent en het IP-adres staat in de lijst user-triggered-agents.json van Google. Alleen de User-Agent controleren is onvoldoende, want die tekst kan iedereen namaken. Het IP-adres maakt de controle betrouwbaar.

  • User-Agent: elk verzoek bevat de tekst Google-Agent in de User-Agent-header.

  • IP-adres: het verzoek komt van een adres uit user-triggered-agents.json. De versie die Google op 17 november 2026 publiceerde, bevat 20 adresblokken: 12 IPv4-reeksen en 8 IPv6-reeksen.

  • Handtekening (experimenteel): Google test het Web Bot Auth-protocol. Deelnemende verzoeken hebben een Signature-Agent-header met de identiteit https://agent.bot.goog en zijn ondertekend volgens de standaard RFC 9421.

Het advies van Google is kort: is een verzoek geverifieerd, sla dan je botcontroles over. Veel CDN's en botdetectiediensten hebben daar een kant-en-klare optie voor. Vraag je leverancier waar die zit, voordat je zelf regels gaat schrijven.

De 6 plekken waar je firewall Google-Agent toch blokkeert

Google noemt zes plekken waar verkeer van Google-Agent ook na een toestemmingsregel nog vastloopt: de volgorde van regels, interactieve CAPTCHA's, acties dieper in de site, limieten per IP-adres, verouderde IP-lijsten en proxies die headers weggooien. Loop ze alle zes na, want één vergeten instelling is genoeg om de agent te stoppen.

  • 1. Volgorde van regels. Je toestemmingsregel moet vóór brede blokkades komen, zoals blokkades op cloud- of datacenternetwerken, beheerde botregels of een categorie die alle AI-agents weert. Anders wint de blokkade.

  • 2. Interactieve controles. Sla niet alleen harde blokkades over, maar ook CAPTCHA's en JavaScript-controles. Denk ook aan losse CAPTCHA-widgets die pas verschijnen bij de zoekfunctie of bij het versturen van een formulier.

  • 3. Acties voorbij de homepage. Een agent moet ook kunnen zoeken, filteren, productpagina's openen, iets in de winkelmand leggen en boeken. Dat geldt ook voor de achterliggende XHR-, GraphQL- of api-verzoeken die je site daarvoor gebruikt.

  • 4. Limieten per IP-adres. Verzoeken van veel verschillende gebruikers komen via dezelfde Google-adressen binnen. Een strenge limiet per IP-adres kan geverifieerd Google-Agent-verkeer daardoor onterecht afremmen.

  • 5. Verouderde IP-lijsten. Heb je de adressen handmatig in je firewall gezet, houd ze dan gelijk met de actuele versie van user-triggered-agents.json. Automatisch bijwerken is het veiligst.

  • 6. Proxies en load balancers. Tussenliggende systemen moeten het oorspronkelijke IP-adres, de User-Agent en bij ondertekende verzoeken de Signature-, Signature-Input- en Signature-Agent-headers doorgeven. Gooit een proxy die weg, dan kan je firewall het verzoek niet meer herkennen.

Stappenplan: Google-Agent toelaten op je eigen site

Begin bij de partij die je beveiliging beheert: je hostingpartij, webbouwer of CDN-leverancier. Vraag of hun botbescherming Google-Agent herkent en toelaat, en loop daarna de zes punten van Google samen na. Je hebt er geen nieuwe website voor nodig, wel een gerichte controle van bestaande instellingen.

  • Breng je beveiliging in kaart. Noteer welke lagen er zijn: CDN, firewall, beveiligingsplugin, CAPTCHA op formulieren en rate limiting bij je hostingpartij.

  • Vraag je leverancier om de verificatieoptie. Laat bevestigen dat Google-Agent wordt geverifieerd op User-Agent én IP-adres, en niet alleen op de tekst in de User-Agent.

  • Controleer je logbestanden. Zoek naar verzoeken met Google-Agent in de User-Agent en kijk of die statuscodes 403 (geweigerd) of 429 (te veel verzoeken) krijgen.

  • Test de belangrijkste route. Kijk of zoekfunctie, filters, winkelmand, boekingsmodule en offerteformulier geen extra CAPTCHA tonen aan geverifieerd verkeer.

  • Kies bewust. Wil je om een goede reden geen agents op je site, dan is dat een keuze. Maak hem dan expliciet, en niet per ongeluk via een standaardinstelling.

Dit soort controles hoort bij technische SEO: zorgen dat zoekmachines en nu ook AI-agents je site goed kunnen bereiken en gebruiken. Wil je dat we meekijken naar jouw instellingen, neem dan contact op.

Wat nog onbekend is

Google zegt niet hoeveel verkeer Google-Agent op dit moment naar websites stuurt, in welke producten de agent precies draait of wanneer Web Bot Auth uit de experimentele fase komt. Nederlandse cijfers zijn er ook niet. Zie dit daarom als voorbereiding: je site werkt dan al voor agents als het gebruik toeneemt.

Ons advies: zet de check op de lijst voor je volgende onderhoudsronde. Het kost weinig en voorkomt dat een beveiligingsinstelling stilletjes klanten wegstuurt.

Veelgestelde vragen

Wat is Google-Agent?

+

Google-Agent is volgens Google de naam van AI-agents op Google-infrastructuur die op verzoek van een gebruiker websites bezoeken en daar acties uitvoeren, zoals zoeken, filteren, iets in de winkelmand leggen of boeken. Het is geen crawler die pagina's indexeert.

Houdt robots.txt Google-Agent tegen?

+

Doorgaans niet. Google schrijft dat user-triggered fetchers, waartoe Google-Agent behoort, robots.txt-regels doorgaans negeren omdat een gebruiker de opdracht gaf. Of een agent je site kan gebruiken, bepaal je dus via je firewall, CDN of botbescherming.

Hoe weet ik of verkeer echt van Google-Agent komt?

+

Controleer twee dingen samen: de User-Agent bevat Google-Agent en het IP-adres staat in de lijst user-triggered-agents.json van Google. Optioneel controleer je ook de Web Bot Auth-handtekening met de identiteit https://agent.bot.goog. Alleen de User-Agent is niet genoeg, want die is na te maken.

Moet ik CAPTCHA's uitzetten voor Google-Agent?

+

Alleen voor geverifieerde verzoeken. Google adviseert om bij geverifieerde Google-Agent-verzoeken botcontroles over te slaan, inclusief CAPTCHA's en JavaScript-controles bij zoeken en formulieren. Voor alle andere bezoekers blijft je beveiliging gewoon werken.

Is Google-Agent toelaten onveilig?

+

Niet als je het goed inricht. Volgens Google voorkom je met een expliciete toestemmingsregel dat legitieme verzoeken worden geblokkeerd, terwijl je bestaande beveiliging blijft staan. Verifieer daarbij altijd op IP-adres en niet alleen op de User-Agent, en houd de IP-lijst actueel.

Geschreven doorRedactie Marketing DivisieOnline marketingbureau in Nijmegen. Google Partner, sinds 2019 actief in 15+ sectoren.Over ons →

Verder lezen

Alle artikelen →
Netwerkkabels in een patchpaneel: de poorten waar een firewall verkeer van Google-Agent kan blokkerenSEO (zoekmachine optimalisatie)

Google-Agent toelaten: 6 plekken waar je firewall blokkeert

Lees artikel →
Man met creditcard achter een laptop, als beeld voor online verkopen en adverteren op bol.comAlgemeen online marketing

Wat kost adverteren op bol.com? Klikprijs en budget

Lees artikel →
Laptop op een houten bureau met een dashboard vol advertentiestatistieken, ter illustratie van de Demand Gen Display-instellingen in Google AdsSEA (zoekmachine advertenties)

Demand Gen Display: vanaf december per advertentiegroep

Lees artikel →
Twee bouwvakkers in veiligheidshesjes en helmen bij een bouwput met een gele graafmachineSEA (zoekmachine advertenties)

Google Ads voor aannemers: kosten, budget en aanpak

Lees artikel →
Van lezen naar resultaatLaat je account doorlichten door de specialist die dit schreef. Gratis, vrijblijvend en binnen een week.
Gratis auditBenieuwd waar jouw budget lekt?Gratis, vrijblijvend en binnen een week. Door de specialist zelf.
Google Partner9+★★★★★Google reviews