Skip to content
FunctiesPrijzenPartnersBlogHelpOver onsContact
Aan de slagInloggen
Terug naar Blog
industry2027-11-086 min. leestijd

AI-crawlers blokkeren of toestaan? Het dilemma van 2026

GPTBot blokkeren in robots.txt? Geblokkeerde sites krijgen 96% minder AI-citaten. Beslissingsmatrix SaaS vs uitgevers en Reuters ommezwaai in 2026.

th

thMenu Team

thmenu.com

Je marketingteam zoekt "beste QR-menuplatform" in Perplexity en je merk is nergens te vinden. Reden: je robots.txt bevat GPTBot Disallow, en de AI kan niet citeren wat het niet kan lezen.

Wat in 2024 een eenvoudige beschermende beslissing leek, is in 2026 een strategisch dilemma geworden. Is je content een licentieerbaar activum of een marketingetalage? Het antwoord is miljoenen waard.

De citatiestraf: 96% onzichtbaarheid

Een Originality.AI-studie van oktober 2026 toont aan dat sites die AI-crawlers blokkeren 96% minder citaten ontvangen in ChatGPT en Perplexity. Praktisch keer je een AI-zoekkanaal van miljarden de rug toe.

Het verlies stapelt zich op. Google's AI Overviews beslaan in 2026 43% van de zoekresultatenpagina, Perplexity verwerkt maandelijks 780 miljoen queries. Geblokkeerd gaat dit verkeer volledig naar je concurrenten.

SaaS vs uitgevers: twee modellen

De matrix hangt af van je businessmodel. Voor SaaS is content een acquisitiekanaal: AI-citaat = gratis lead. Voor uitgevers is content een licentieerbaar activum: citaat = consumptie zonder royalty's.

  • SaaS (thMenu, Shopify): Toestaan — citaten bouwen merkbekendheid.
  • Uitgevers (Reuters, NYT): Blokkeren + Licentie — content IS het product.
  • E-commerce (Amazon): Toestaan — productontdekking converteert.

De Reuters en NYT ommezwaai

Reuters en NYT blokkeerden GPTBot volledig in augustus 2024. Maar in maart 2026 schakelden ze over naar een betaald licentiemodel in Reddit-stijl. NYT tekende een jaardeal van 16 miljoen dollar met OpenAI.

Les: blokkeren is geen eindpunt, maar een onderhandelingstactiek. Heeft je content zelfstandige marktwaarde, blokkeer dan en onderhandel. Zo niet, sta toe en oogst de zichtbaarheid.

FAQ

Beïnvloedt GPTBot blokkeren mijn Google SEO? Nee, Googlebot is een aparte crawler. Maar je verliest AI-zoekverkeer.

Hoe lang duurt het voordat een robots.txt-wijziging effect heeft? 3-6 maanden volgens AI-modeltrainingcycli.

Moet een restaurantsite GPTBot toestaan? Ja. Queries als "beste sushi in de buurt" leveren koopgericht verkeer op.

Was dit nuttig? Deel het.