Wie AI-training via robots.txt wil blokkeren, hoeft vanaf 2027 niet meer elke AI-partij apart uit te sluiten. Google kondigde op 30 oktober 2026 aan dat het een gedeelde robots.txt-regel gaat ondersteunen waarmee je in één keer aangeeft dat je content niet voor AI-training gebruikt mag worden. Microsoft Bing maakte dezelfde dag eigen AI-instellingen bekend. Wat verandert er, wanneer, en moet je als MKB-ondernemer nu al iets doen?

Het korte antwoord: nu hoeft er niets. Google mikt op ondersteuning "in 2027" en Bing begint op 1 februari 2027. Wel is dit het moment om te bepalen wat je wilt, want blokkeren heeft gevolgen voor je zichtbaarheid in AI-antwoorden.

Wat heeft Google aangekondigd?

Google gaat een gedeeld 'policy token' in robots.txt ondersteunen waarmee je AI-training weigert bij alle deelnemende AI-aanbieders tegelijk. Het voorstel komt van de AIPREF-werkgroep van de IETF, het internationale standaardisatie-orgaan. Google wil dit in 2027 ondersteunen; een exacte datum is er nog niet.

Dat staat in de aankondiging op de Google Search Central blog van 30 oktober 2026. Tot nu toe moest je per AI-bedrijf een aparte regel opnemen, zoals Google-Extended voor Google, dat volgens dezelfde aankondiging sinds 2023 bestaat. De nieuwe regel werkt als één schakelaar voor iedereen die meedoet.

Belangrijk detail: gebruik je het nieuwe token om training te weigeren en noem je Google-Extended niet apart, dan leest Google dat alsof je Google-Extended hebt geblokkeerd. Bestaande bedrijfsspecifieke regels blijven gewoon werken naast het nieuwe signaal.

Hoe ziet de robots.txt-regel eruit?

Het voorstel gebruikt een speciale user-agent-groep met de naam __usage_ai-training, gevolgd door een Disallow-regel. Een algemene regel voor "User-agent: *" telt daarbij niet als keuze. Omdat het om een conceptstandaard gaat, kan de precieze schrijfwijze nog veranderen voordat Google en Bing hem gaan lezen.

De syntax zoals die nu in het concept staat, beschreven door PPC Land op 31 oktober 2026:

• User-agent: __usage_ai-training

• Disallow: /

Volgens PPC Land is het nog geen afgeronde standaard: binnen de IETF zijn er nog open discussiepunten. Google noemt het zelf ook een "draft proposal". Zet de regel dus niet blind in je robots.txt in de veronderstelling dat hij vandaag al iets doet.

Wat verandert er bij Bing?

Microsoft Bing kondigde op 30 oktober 2026 aparte instellingen aan voor AI-training en voor grounding, het gebruik van je content in AI-antwoorden. Bing begint de nieuwe voorkeuren op 1 februari 2027 te respecteren. Je gewone posities in Bing veranderen volgens Microsoft niet door deze keuzes.

De tijdlijn, zoals gerapporteerd door Search Engine Roundtable op 30 oktober 2026:

• 15 december 2026: tijdelijke grounding-instellingen in Bing Webmaster Tools voor sites die nu de oudere NoArchive- of NoCache-directives gebruiken.

• 1 februari 2027: Microsoft begint de nieuwe voorkeuren toe te passen tijdens het crawlen.

• 1 maart 2027: deadline om over te stappen als je met de oude directives restricties wilt houden.

• 30 september 2027: de tijdelijke grounding-voorkeuren vervallen.

Gebruik je NoArchive of NoCache niet, dan raakt de deadline van 1 maart 2027 je niet direct. Wie Bing Webmaster Tools heeft gekoppeld, kan de nieuwe instellingen daar terugvinden zodra ze beschikbaar zijn.

Moet je AI-training blokkeren als MKB-bedrijf?

Voor de meeste MKB-bedrijven is blokkeren niet de logische keuze. Je wilt juist dat AI-assistenten je bedrijf kennen en noemen. Blokkeren kan zinvol zijn als je content zelf je product is, zoals betaalde artikelen, cursussen of unieke data. Voor een dienstverlener of webshop weegt zichtbaarheid meestal zwaarder.

Let op het verschil tussen training en grounding. Training gaat over het bouwen van AI-modellen. Grounding gaat over het ophalen van je pagina's om een actueel antwoord te geven, vaak met een link. Volgens Google komen sites die Google-Extended expliciet toestaan in aanmerking om te verschijnen en klikken te krijgen via grounding in Gemini Apps. Een brede blokkade kan dus meer kosten dan je denkt.

Een eerste praktijkvoorbeeld laat dat risico zien. Volgens PPC Land (31 oktober 2026) lag in een case study van één website de geschatte doorklikratio in AI Overviews op 0,9 procent, en kwam ongeveer 8 procent van de vertoningen uit AI-functies. Toen de site uit die AI-functies werd gehaald, daalden ook de gewone organische klikken. Eén site is geen bewijs, maar het is een reden om voorzichtig te zijn met uitzetten.

Wat kun je nu al doen?

Je hoeft vandaag niets te wijzigen, maar een korte check van je robots.txt is verstandig. Kijk welke AI-regels er al in staan, bepaal per onderwerp wat je wilt (training, AI-antwoorden, gewone zoekresultaten) en zet in je agenda dat je in 2027 opnieuw kijkt wanneer Google en Bing het signaal echt lezen.

• Open je robots.txt (jouwdomein.nl/robots.txt) en zoek naar regels voor Google-Extended, GPTBot of andere AI-crawlers. Soms zijn die ooit door een plugin of webbouwer toegevoegd zonder dat iemand het weet.

• Maak een bewuste keuze voor training en voor AI-antwoorden apart. Wil je in ChatGPT, Gemini of Copilot genoemd worden, blokkeer dan niet breed.

• Blokkeer niet je gewone vindbaarheid. Een regel voor Googlebot of Bingbot raakt je posities in de zoekresultaten. Het nieuwe token is alleen bedoeld voor AI-training.

• Reken niet op robots.txt als beveiliging. Het is een verzoek aan crawlers die zich eraan houden, geen slot op de deur. Vertrouwelijke informatie hoort achter een login.

• Gebruik je NoArchive of NoCache? Kijk dan vóór 1 maart 2027 naar de nieuwe Bing-instellingen.

Wil je weten hoe je bedrijf nu al in AI-antwoorden verschijnt, lees dan ons artikel over AI-zichtbaarheid meten in Search Console. En over hoe Google meer links in AI Overviews en AI Mode toont, schreven we in dit artikel.

Waarom dit belangrijk is voor je online vindbaarheid

Robots.txt was jarenlang een bestand voor zoekmachines. Nu bepaalt het ook of AI-systemen je content mogen gebruiken. Wie er nooit naar kijkt, kan per ongeluk onzichtbaar worden in AI-antwoorden of juist meer delen dan bedoeld. Een bewuste, gedocumenteerde keuze voorkomt verrassingen in 2027.

Google schrijft in de aankondiging van 30 oktober 2026 dat het voorstel aansluit bij de EU Code of Practice voor aanbieders van AI-modellen onder de EU AI Act, die robots.txt erkent als manier om machineleesbare voorkeuren door te geven. Ook voor Nederlandse websites is dit dus relevant.

Twijfel je wat er in jouw robots.txt staat of wat de juiste instelling is voor je site? Bij technische SEO nemen we dit mee: we controleren wat crawlers mogen zien en zorgen dat je vindbaar blijft in Google én in AI-antwoorden.