Contoarele au numărat roboți
Contoarele de aici au numărat roboți. Toate, fără excepție. Până luna aceasta nimeni de aici nu putea spune câți, pentru că nimic nu măsura asta — iar un crawler care cere o imagine de contor arată exact ca o persoană care cere o imagine de contor.
Acum se măsoară. Cifrele sunt mai rele decât era de așteptat.
Ce arată primele zile
Numărarea a început pe 9 august. Pe toate contoarele de pe acest site, ponderea accesărilor venite de la crawleri, nu de la oameni:
- 9 august — 1.193 din 16.070 de accesări, aproximativ 7%
- 10 august — 1.624 din 20.181
- 11 august — 1.954 din 20.918
- 12 august — 2.707 din 22.740, aproximativ 12%
Așadar, undeva între șapte și doisprezece la sută. Patru zile nu sunt o tendință și nu vor fi prezentate ca atare — variația poate veni de la crawleri sau poate fi detecția care prinde mai mult pe măsură ce lista de semnături crește.
Cifra cu adevărat izbitoare
Media ascunde partea interesantă. Privind contoarele individuale zi de zi, au fost 2.412 zile-contor măsurate, iar în 631 dintre ele majoritatea accesărilor numărate au venit de la boți.
Cu alte cuvinte, în aproximativ un sfert din zilele-contor, majoritatea „vizitatorilor” nu erau vizitatori. Așa arată un site liniștit din interior: o mână de oameni reali și o patrulă constantă de crawleri care nu se oprește niciodată, nu doarme niciodată și nu citește niciodată nimic.
Pe un site mic, numărul care urcă încet chiar și atunci când nimeni nu are cum să citească are acum o explicație, iar aceasta apare pe pagina de statistici ca Boți (30 de zile).
Cum sunt recunoscuți
După numele pe care clientul și-l dă singur. Baiduspider, Googlebot, Amazonbot, AhrefsBot, diversele servicii de monitorizare a disponibilității și uneltele simple care nu pretind altceva: curl, wget, python-requests, Scrapy. O cerere care nu dă niciun nume este tratată tot ca bot, pentru că browserele dau întotdeauna unul.
Lista este scurtă în mod deliberat. Ea recunoaște doar semnăturile neechivoce, ceea ce înseamnă că crawlerii care se poartă corect sunt prinși, iar un crawler care minte că este Chrome nu este prins. Aceasta este direcția corectă: un bot numărat ca persoană este o eroare mică, iar o persoană eliminată ca bot înseamnă date care nu mai pot fi recuperate niciodată.
Decizia care nu a fost luată
Iată partea sinceră. Boții sunt încă numărați în totaluri. Sunt afișați separat, dar numărul mare de pe contor îi include în continuare.
Excluderea lor este o singură setare și este dezactivată în mod deliberat. Activarea ei ar scădea numărul vizibil al fiecărui contor de pe acest site cu aproximativ o zecime, peste noapte, fără ca cineva să fi fost întrebat. Pentru contoare care funcționează din 2007 și au devenit un mic motiv de mândrie pe pagina cuiva, a scădea pe tăcute o bucată din totalul lor nu este o corecție tehnică neutră.
Așa că mai întâi numărul este afișat. Dacă ar trebui scăzut, nu doar raportat, merită să aflăm părerea dvs. — formularul de asistență se află pe acest site, iar la celălalt capăt este o persoană reală.