Броячите са броили роботи
Броячите тук са броили роботи. Всички, без изключение. До този месец никой тук не можеше да каже колко, защото нищо не го измерваше – а робот, който изисква изображение на брояч, изглежда точно като човек, който изисква изображение на брояч.
Сега това се измерва. Числата са по-лоши от очакваното.
Какво показват първите дни
Отчитането започна на 9 август. Във всички броячи в този сайт делът на посещенията, идващи от роботи, а не от хора:
- 9 август – 1193 от 16 070 посещения, около 7%
- 10 август – 1624 от 20 181
- 11 август – 1954 от 20 918
- 12 август – 2707 от 22 740, около 12%
Значи някъде между седем и дванадесет процента. Четири дни не са тенденция и няма да бъдат представяни като такава – разликата може да се дължи на самите роботи или на това, че разпознаването хваща повече, докато списъкът със сигнатури расте.
Числото, което наистина прави впечатление
Средната стойност скрива интересната част. Ако се гледат отделните броячи ден по ден, измерени са 2412 брояч-дни, а в 631 от тях повечето преброени посещения са били от роботи.
С други думи, при приблизително една четвърт от брояч-дните повечето „посетители“ не са били посетители. Така изглежда един тих сайт отвътре: шепа истински хора и постоянен патрул от роботи, който никога не спира, никога не спи и никога не чете нищо.
При малък сайт числото, което пълзи нагоре, когато никой не би могъл да чете, вече има обяснение и то стои на статистическата страница като Роботи (30 дни).
Как се разпознават
По името, с което клиентът се представя. Baiduspider, Googlebot, Amazonbot, AhrefsBot, различните услуги за наблюдение на достъпността и обикновените инструменти, които не се преструват на нещо друго: curl, wget, python-requests, Scrapy. Заявка, която изобщо не посочва име, също се третира като робот, защото браузърите винаги посочват такова.
Списъкът умишлено е кратък. Той съвпада само със сигнатури, които са еднозначни, което означава, че добре възпитаните роботи се хващат, а робот, който лъже, че е Chrome – не. Така е правилно: робот, преброен като човек, е малка грешка, а човек, изхвърлен като робот, е данни, които никога не могат да бъдат върнати.
Решението, което още не е взето
Ето честната част. Роботите все още се броят в общите суми. Показват се отделно, но голямото число на брояча все още ги включва.
Изключването им е една-единствена настройка и тя умишлено е изключена. Включването ѝ би намалило видимото число на всеки брояч в този сайт с около една десета, за една нощ, без никой да е бил попитан. За броячи, които работят от 2007 г. и са станали малък повод за гордост на нечия страница, тихото изваждане на част от сбора им не е неутрална техническа корекция.
Затова числото първо се показва. Ако то трябва да се изважда, а не само да се отчита, това си струва да се чуе – формулярът за поддръжка е в този сайт, а от другата страна има истински човек.