Počítadlá počítali roboty

Počítadlá tu počítali roboty. Všetky bez výnimky. Až do tohto mesiaca tu nikto nevedel povedať koľko, pretože to nič nemeralo – a prehľadávací robot, ktorý si vyžiada obrázok počítadla, vyzerá presne ako človek, ktorý si vyžiada obrázok počítadla.

Teraz sa to meria. Čísla sú horšie, než sa čakalo.

Čo ukazujú prvé dni

Počítanie sa začalo 9. augusta. Podiel zobrazení pochádzajúcich od prehľadávacích robotov namiesto ľudí na všetkých počítadlách tohto webu:

9. augusta – 1 193 zo 16 070 zobrazení, približne 7 %
10. augusta – 1 624 z 20 181
11. augusta – 1 954 z 20 918
12. augusta – 2 707 z 22 740, približne 12 %

Teda niekde medzi siedmimi a dvanástimi percentami. Štyri dni nie sú trend a nebudú sa tak prezentovať – rozdiely môžu spôsobovať prehľadávacie roboty alebo to, že rozpoznávanie zachytáva viac pri rozširovaní zoznamu identifikačných reťazcov.

Číslo, ktoré naozaj prekvapuje

Priemer skrýva zaujímavú časť. Pri sledovaní jednotlivých počítadiel deň po dni bolo zmeraných 2 412 dní počítadiel a v 631 z nich tvorili boty väčšinu započítaných zobrazení.

Inými slovami, približne v štvrtine dní počítadiel väčšina „návštevníkov“ nebola návštevníkmi. Takto vyzerá tichý web zvnútra: hŕstka skutočných ľudí a vytrvalá hliadka prehľadávacích robotov, ktorá sa nikdy nezastaví, nikdy nespí a nikdy nič nečíta.

Na malom webe má počet, ktorý pomaly rastie v čase, keď web nemôže nikto čítať, teraz vysvetlenie a na stránke so štatistikami je uvedený ako Boty (30 dní).

Ako sa rozpoznávajú

Podľa názvu, ktorým sa klient sám predstavuje. Baiduspider, Googlebot, Amazonbot, AhrefsBot, rôzne monitory dostupnosti aj obyčajné nástroje, ktoré sa na nič iné nehrajú: curl, wget, python-requests, Scrapy. Aj požiadavka, ktorá neuvedie vôbec žiadny názov, sa považuje za bota, pretože prehliadače ho uvádzajú vždy.

Zoznam je zámerne krátky. Zachytáva iba jednoznačné identifikačné reťazce, čo znamená, že slušne sa správajúce prehľadávacie roboty zachytí, ale prehľadávacieho robota, ktorý klame, že je prehliadač Chrome, nezachytí. Takto je to správne: bot započítaný ako človek je malá chyba, no človek vyradený ako bot predstavuje údaje, ktoré už nikdy nemožno získať späť.

Rozhodnutie, ktoré ešte nepadlo

Teraz tá úprimná časť. Boty sa stále započítavajú do celkových počtov. Zobrazujú sa samostatne, ale veľké číslo na počítadle ich stále zahŕňa.

Ich vylúčenie je otázkou jedného nastavenia a to je zámerne vypnuté. Jeho zapnutie by cez noc znížilo viditeľný počet každého počítadla na tomto webe približne o desatinu bez toho, aby sa niekto niekoho spýtal. Pri počítadlách, ktoré bežia od roku 2007 a stali sa malým dôvodom na hrdosť na niečej stránke, nie je tiché odpočítanie časti celkového počtu neutrálnou technickou opravou.

Preto sa najprv zobrazuje číslo. Ak by sa malo odpočítavať namiesto samotného vykazovania, stojí za to sa ozvať – formulár podpory je na tomto webe a na jeho druhom konci je skutočný človek.