Skip to content
FunctiesPrijzenPartnersBlogHelpOver onsContact
Aan de slagInloggen
Terug naar Blog
industry2027-11-125 min. leestijd

Anthropic, OpenAI en Google: Vergelijking van Bot-Crawlgedrag

GPTBot komt elke 7 dagen terug, PerplexityBot 3, ClaudeBot 14, Google-Extended 21. Wekelijks publiceren bereikt alle 4 LLMs — thMenu-meetdata.

th

thMenu Team

thmenu.com

"Hoe vaak crawlt GPTBot mijn site?" was lang een gokvraag. Na zes maanden logging van de vier grootste LLM-crawlers op thMenu hebben we harde cijfers.

De Echte Crawl-Frequenties

Uit onze Cloudflare worker-logs: GPTBot keert elke 7 dagen terug naar een typische pagina. PerplexityBot gemiddeld om de 3 dagen — verreweg de meest agressieve. ClaudeBot 14-daagse cyclus, Google-Extended 21 dagen, op een aparte queue los van de hoofd-Googlebot.

De verschillen zijn niet willekeurig. Perplexity investeert in versheid omdat het als realtime-antwoordmachine werkt. Google-Extended is een opt-in AI-trainingscrawler, los van de zoekindex.

Publicatiestrategie

Deze cijfers vertalen direct naar een redactiekalender. Wekelijkse content bereikt alle vier de LLMs binnen het 21-daagse venster van Google-Extended.

  • Wekelijks: Alle 4 LLMs indexeren binnen 4 weken
  • Maandelijks: 3 van 4 halen het bij, Google-Extended valt achter
  • Per kwartaal: Alleen PerplexityBot blijft actueel

thMenu-Publicatieritme

De thMenu-blog publiceert elke maandag. Elk nieuw artikel wordt doorgaans binnen 28 dagen door alle vier de LLMs geïndexeerd.

Resultaat: ChatGPT, Claude, Perplexity en Gemini citeren actuele versies van QR-menu-content, geen verouderde versies. Publicatiediscipline weegt zwaarder dan crawl-budget.

FAQ

Hoe vaak GPTBot? Gemiddeld om de 7 dagen, 3-4 dagen voor populaire pagina's.

ClaudeBot herkennen? User-Agent "ClaudeBot/1.0" en Anthropic-IP-ranges.

Google-Extended = Googlebot? Nee, los voor Gemini/Vertex AI-training.

Was dit nuttig? Deel het.