Brojači su brojili robote

Ovdje su brojači brojili robote. Sve, bez iznimke. Do ovog mjeseca nitko ovdje nije mogao reći koliko jer to ništa nije mjerilo – a web-robot koji zatraži sliku brojača izgleda potpuno isto kao osoba koja zatraži sliku brojača.

Sada se to mjeri. Brojke su gore od očekivanih.

Što pokazuju prvi dani

Brojanje je počelo 9. kolovoza. Udio pregleda koji dolaze od web-robota, a ne od ljudi, na svim brojačima ovog web-mjesta:

• 9. kolovoza – 1.193 od 16.070 pregleda, otprilike 7 %
• 10. kolovoza – 1.624 od 20.181
• 11. kolovoza – 1.954 od 20.918
• 12. kolovoza – 2.707 od 22.740, otprilike 12 %

Dakle, negdje između sedam i dvanaest posto. Četiri dana nisu trend i neće biti prikazana kao trend – promjene mogu dolaziti od web-robota ili od prepoznavanja koje ih otkriva više kako raste popis potpisa.

Brojka koja doista upada u oči

Prosjek skriva zanimljiv dio. Pri promatranju pojedinih brojača dan po dan, zabilježeno je 2.412 izmjerenih kombinacija brojača i dana, a u 631 od njih većina izbrojenih pregleda dolazila je od botova.

Drugim riječima, u otprilike četvrtini kombinacija brojača i dana većina „posjetitelja“ nisu bili posjetitelji. Tako tiho web-mjesto izgleda iznutra: šačica stvarnih ljudi i stalna ophodnja web-robota koja nikada ne staje, nikada ne spava i nikada ništa ne čita.

Na malom web-mjestu broj koji polako raste kada nitko ne bi mogao čitati sada ima objašnjenje, a ono se nalazi na stranici statistike pod Botovi (30 dana).

Kako se prepoznaju

Po imenu kojim se klijent predstavlja. Baiduspider, Googlebot, Amazonbot, AhrefsBot, razni nadzornici dostupnosti i obični alati koji se ne pretvaraju da su nešto drugo: curl, wget, python-requests, Scrapy. Zahtjev koji se uopće ne predstavlja također se smatra botom jer preglednici uvijek navode ime.

Popis je namjerno kratak. Prepoznaje samo nedvosmislene potpise, što znači da se pristojni web-roboti otkrivaju, a web-robot koji se lažno predstavlja kao Chrome ne otkriva. Tako i treba biti: bot izbrojen kao osoba mala je pogreška, a osoba odbačena kao bot podatak je koji se nikada ne može vratiti.

Odluka koja nije donesena

Evo iskrenog dijela. Botovi se i dalje ubrajaju u ukupne vrijednosti. Prikazuju se zasebno, ali veliki broj na brojaču i dalje ih uključuje.

Izuzimanje je jedna postavka i namjerno je isključena. Njezinim uključivanjem vidljivi broj svakog brojača na ovom web-mjestu preko noći bi pao za otprilike desetinu, a da nitko ne bi bio pitan. Za brojače koji rade od 2007. i postali su mali izvor ponosa na nečijoj stranici, neprimjetno oduzimanje dijela ukupnog broja nije neutralan tehnički ispravak.

Zato se brojka najprije prikazuje. Ako bi je trebalo oduzimati umjesto samo navoditi, vrijedi čuti mišljenje o tome – obrazac za podršku nalazi se na ovom web-mjestu i s druge strane postoji stvarna osoba.