Brojači su brojali robote

Brojači ovde su brojali robote. Sve njih, bez izuzetka. Do ovog meseca niko ovde nije mogao da kaže koliko, jer to ništa nije merilo – a pretraživački robot koji traži sliku brojača izgleda potpuno isto kao osoba koja traži sliku brojača.

Sada se meri. Brojke su gore nego što se očekivalo.

Šta pokazuju prvi dani

Merenje je počelo 9. avgusta. Udeo pregleda koji potiču od pretraživačkih robota, a ne od ljudi, na svim brojačima na ovom sajtu:

• 9. avgust – 1.193 od 16.070 pregleda, oko 7%
• 10. avgust – 1.624 od 20.181
• 11. avgust – 1.954 od 20.918
• 12. avgust – 2.707 od 22.740, oko 12%

Dakle, negde između sedam i dvanaest procenata. Četiri dana nisu trend i neće biti predstavljena kao trend – varijacija može poticati od robota, a može i od toga što prepoznavanje hvata sve više kako lista potpisa raste.

Broj koji zaista upada u oči

Prosek skriva zanimljiv deo. Kad se pogledaju pojedinačni brojači dan po dan, izmereno je 2.412 brojačkih dana, a u 631 njih većinu izbrojanih pregleda činili su botovi.

Drugim rečima, otprilike u četvrtini brojačkih dana većina „posetilaca“ nisu bili posetioci. Tako izgleda miran sajt iznutra: šačica pravih ljudi i stalna patrola robota koja nikad ne staje, nikad ne spava i nikad ništa ne čita.

Na malom sajtu, broj koji se uvećava kad ga niko ne bi mogao čitati sada ima objašnjenje, a nalazi se na stranici sa statistikom kao Botovi (30 dana).

Kako se prepoznaju

Po imenu koje klijent daje sam sebi. Baiduspider, Googlebot, Amazonbot, AhrefsBot, razni monitori dostupnosti i obični alati koji se ne pretvaraju: curl, wget, python-requests, Scrapy. Zahtev koji uopšte ne daje ime takođe se tretira kao bot, jer pregledači uvek daju ime.

Lista je namerno kratka. Poklapa samo potpise koji su nedvosmisleni, što znači da se uhvate uredni roboti, a robot koji laže da je Chrome ne. To je pravi smer: bot izbrojan kao osoba mala je greška, a osoba odbačena kao bot podatak je koji se nikada ne može vratiti.

Odluka koja nije doneta

Evo iskrenog dela. Botovi se i dalje broje u ukupnim zbirovima. Prikazuju se zasebno, ali veliki broj na brojaču ih i dalje uključuje.

Njihovo isključivanje je jedno podešavanje i ono je namerno isključeno. Uključivanje bi smanjilo vidljivi broj svakog brojača na ovom sajtu za otprilike desetinu, preko noći, a da niko nije pitan. Za brojače koji rade od 2007. i postali su mali izvor ponosa na nečijoj stranici, tiho oduzimanje dela njihovog zbira nije neutralna tehnička ispravka.

Zato se broj prvo prikazuje. Ako bi ga trebalo oduzeti, a ne samo prijaviti, to vredi čuti – obrazac za podršku nalazi se na ovom sajtu, a s druge strane je stvarna osoba.