Cloudflare AI bots: voorkom dat je per ongeluk je Googlebot blokkeert

Cloudflare AI bots: voorkom dat je per ongeluk je Googlebot blokkeert

Cloudflare kondigde op 1 juli 2026 een grote update aan van de manier waarop websites AI bots kunnen blokkeren. De wijziging klinkt eerst als goed nieuws voor wie zijn content wil beschermen tegen kunstmatige intelligentie. Maar er schuilt een addertje onder het gras: vanaf 15 september 2026 kunnen sites die AI-training blokkeren ook per ongeluk Googlebot buitensluiten. En wie niet vindbaar is in Google, mist klanten. Voor ondernemers en mkb-bedrijven met een eigen website is dit een ontwikkeling die je niet kunt negeren.

In dit artikel leggen we uit wat Cloudflare AI bots precies veranderen, waarom Googlebot in het gedrang kan komen en welke stappen je nu moet zetten om je online vindbaarheid te beschermen.

Wat Cloudflare op 1 juli 2026 aankondigde

Cloudflare noemde de update de tweede editie van de zogeheten Content Independence Day. Het bedrijf, dat volgens eigen cijfers een groot deel van het web van beveiliging en caching voorziet, introduceert een nieuw systeem om automatisch verkeer te sorteren. In plaats van één simpele knop om alle AI bots te blokkeren, verdeelt Cloudflare crawlers nu in drie groepen:

• Search: bots die je site indexeren om later zoekresultaten te tonen en bezoekers terug te sturen.
• Agent: bots die in real time voor een gebruiker handelingen uitvoeren, zoals ChatGPT-User of browsers bestuurd door Gemini of Claude.
• Training: bots die content ophalen om taalmodellen te trainen of te verfijnen.

Cloudflare stelt dat bot-operatoren aparte crawlers moeten inzetten voor elk doel, zodat websites kunnen zien waarom een bot langskomt en zelf kunnen kiezen of ze die toelaten. De nieuwe instellingen zijn vanaf 1 juli 2026 beschikbaar voor alle klanten, inclusief de gratis accounts.

Waarom 15 september 2026 een belangrijke datum is

Twee automatische veranderingen gaan op 15 september 2026 in. Ten eerste worden voor nieuwe klanten en voor bestaande klanten die hun instellingen niet hebben aangepast, de crawlers voor Training en Agent standaard geblokkeerd op pagina's die advertenties tonen. Search blijft wel toegestaan.

De tweede wijziging is de gevaarlijkste voor je vindbaarheid. Cloudflare gaat zogeheten gemengde crawlers beoordelen op hun totale gedrag en de strengste regel toepassen. Dat betekent dat een crawler die zowel voor Search als voor Training werkt, wordt geblokkeerd zodra je Training blokkeert. En juist Googlebot, Applebot en Bingbot noemt Cloudflare zelf als voorbeelden van zulke gemengde crawlers, omdat ze allemaal voor zoeken én voor AI-trainingsdoeleinden draaien.

Heb je eerder de optie Block AI bots aangezet, dan val je automatisch onder deze nieuwe regel. Controleer je je instellingen niet voor 15 september, dan loop je het risico dat Google je website niet meer goed kan crawlen.

Hoe Cloudflare AI bots de verhoudingen op het web veranderen

De update past in een bredere verschuiving die Cloudflare in een eigen rapport in kaart brengt. AI-training is inmiddels goed voor 52 procent van alle crawler-verzoeken op het netwerk van Cloudflare, tegen 22 procent in het voorjaar van 2025. Daarnaast steeg het aantal dagelijkse verzoeken van AI-agents met meer dan 1700 procent over een jaar. Voor het eerst is meer dan de helft van het internetverkeer niet-menselijk.

Die cijfers komen overeen met wat Search Engine Journal op 2 juli 2026 rapporteerde. Het vakblad bevestigt dat wie Training blokkeert om zijn content te beschermen, onbedoeld ook de zoek-crawler kan uitsluiten die nodig is om in Google gevonden te worden. Een Cloudflare-blokkeerregel werkt bovendien op netwerkniveau en is daardoor moeilijker te omzeilen dan een regel in robots.txt, die Google zelf kan negeren.

Voor bedrijven die organisch gevonden willen worden, is dit een serieus risico. Wie niet goed crawbaar is, zakt op termijn weg in de zoekresultaten en dat raakt direct het aantal aanvragen en klanten.

Wat je nu het beste kunt doen

Een paar gerichte stappen houden je aan de veilige kant:

• Log in op je Cloudflare-dashboard en bekijk je huidige AI-bot-instellingen vóór 15 september 2026.
• Controleer of je de optie Block AI bots ooit hebt aangezet en of je nu onder de nieuwe gecombineerde regel valt.
• Zorg dat Search-crawlers zoals Googlebot expliciet zijn toegestaan, ook als je Training blokkeert.
• Volg je crawl-statistieken in Google Search Console in de weken na de wijziging, zodat je een daling snel opmerkt.
• Lees de aankondiging van Cloudflare zelf na op hun blog, want de regels kunnen in de komende maanden nog verschuiven.

Twijfel je of je dit zelf goed kunt instellen? Dan is verstandig WordPress onderhoud of professionele ondersteuning een optie, zodat je niet per ongeluk je belangrijkste bron van bezoekers dichtdraait.

Houd je vindbaarheid breed op orde

De Cloudflare AI bots wijziging is een herinnering dat je online zichtbaarheid niet van één instelling afhangt. Wie afhankelijk is van organische zoekresultaten, doet er goed aan om zijn vindbaarheid structureel aan te pakken. Met serieuze SEO-optimalisatie zorg je dat je website niet alleen technisch goed crawbaar is, maar ook blijft scoren op de zoekwoorden die jouw klanten gebruiken. Wil je weten hoe jouw site ervoor staat? Vraag dan een analyse aan en we kijken samen naar de mogelijkheden.

Conclusie

Cloudflare geeft websites per 15 september 2026 nieuwe standaardregels voor AI bots. Wie AI-training blokkeert, kan daarmee onbedoeld ook Googlebot uitsluiten, met alle gevolgen van dien voor de vindbaarheid in Google. Bekijk tijdig je Cloudflare-instellingen, zorg dat Search-crawlers toegankelijk blijven en houd je crawl-statistieken in de gaten. Wie zijn online vindbaarheid serieus neemt, voorkomt zo dat een goed bedoelde beveiligingsmaatregel zijn grootste bron van nieuwe klanten blokkeert.