Eén crawler zorgde voor het meeste botverkeer

Tellers hier houden robots in een eigen kolom. Ze worden vastgelegd, maar ze bewegen het getal op het insigne niet, tenzij de instelling aanstaat. Door die scheiding is een vraag makkelijk te stellen die anders lastig ligt: wie crawlt er eigenlijk een pagina die klein genoeg is om een bezoekteller nodig te hebben?

Dertien dagen gegevens over alle tellers van de dienst, gelezen op 27 augustus 2026: 47.841 robottreffers in totaal.

robot	treffers	tellers	treffers per teller
Meta AI	36.670	151	243
Googlebot	3.272	148	22
Baiduspider	3.258	345	9
Bytespider	419	94	4
ClaudeBot	225	29	8
GPTBot	97	86	1

Eén crawler is 76,6 % van al het robotverkeer op deze dienst. En het is niet degene met het grootste bereik — Baiduspider raakt meer dan twee keer zoveel tellers aan. Meta AI gaat diep op weinig.

Hoe het er dag voor dag uitziet

Het kwam niet geleidelijk. 148 treffers op 14 augustus, 613 de dag erna, toen 8.311 op de 16e, en sindsdien elke dag een paar duizend, verspreid over vijftig tot tachtig tellers.

De piek op één teller op één dag was 2.488 treffers van deze ene crawler.

Waarom dat getal voor een kleine site uitmaakt

Bekijk het van de ontvangende kant. Een pagina krijgt normaal een handvol bezoeken per dag. Op een ochtend toont ze er tweeënhalfduizend. Werden robots met alle anderen meegeteld, dan zou de redelijke conclusie zijn dat er iets gebeurd was — een link ergens, een vermelding, een publiek. Er was niets gebeurd. Een crawler had die site 2.488 keer afgelopen.

Dat is het hele argument om robots in een aparte kolom te houden in plaats van ze eruit te filteren of erin op te nemen. Erin opgenomen zorgen ze voor valse opwinding. Er helemaal uit gefilterd heeft de vraag "was dat echt?" geen antwoord meer. Apart gehouden heeft de vraag een antwoord, en dat kost één blik.

Het deel dat wij niet kunnen verklaren

Waarom deze crawler zo geconcentreerd is, is van hieruit niet te zien. Hij zou de linkstructuur van één platform kunnen volgen, of één sitemap, of de tellers staan eenvoudigweg op het soort pagina's waar hij op dit moment belangstelling voor heeft. We kunnen zien wat hij deed, niet wat hij wilde.

Ook duidelijk gezegd: dit zijn dertien dagen, want de robottabel begint pas op 14 augustus. Het is een jonge tabel en ze kent vorige maand niet. Er een aandeel uit aflezen alsof het een jaar beschreef, zou precies de fout zijn waar deze dienst steeds over schrijft.