Skaitikliai skaičiavo robotus

Čia esantys skaitikliai skaičiavo robotus. Visi be išimties. Iki šio mėnesio niekas čia negalėjo pasakyti, kiek jų buvo, nes tai nebuvo matuojama – o paieškos robotas, prašantis skaitiklio paveikslėlio, atrodo lygiai taip pat kaip žmogus, prašantis skaitiklio paveikslėlio.

Dabar tai matuojama. Skaičiai blogesni, nei tikėtasi.

Ką rodo pirmosios dienos

Skaičiuoti pradėta rugpjūčio 9 d. Visuose šios svetainės skaitikliuose paieškos robotų, o ne žmonių sukurtų peržiūrų dalis:

• rugpjūčio 9 d. – 1 193 iš 16 070 peržiūrų, maždaug 7 %
• rugpjūčio 10 d. – 1 624 iš 20 181
• rugpjūčio 11 d. – 1 954 iš 20 918
• rugpjūčio 12 d. – 2 707 iš 22 740, maždaug 12 %

Taigi kažkur tarp septynių ir dvylikos procentų. Keturios dienos nėra tendencija ir nebus taip pristatomos – svyravimą gali lemti patys paieškos robotai arba geresnis jų atpažinimas ilgėjant atpažinimo požymių sąrašui.

Skaičius, kuris iš tiesų stebina

Vidurkis slepia įdomiąją dalį. Nagrinėjant atskirus skaitiklius diena po dienos, buvo išmatuota 2 412 skaitiklio dienų, ir 631 iš jų daugumą užskaitytų peržiūrų sudarė robotai.

Kitaip tariant, maždaug ketvirtadaliu skaitiklio dienų dauguma „lankytojų“ nebuvo lankytojai. Taip rami svetainė atrodo iš vidaus: saujelė tikrų žmonių ir nuolatinis paieškos robotų patrulis, kuris niekada nesustoja, nemiega ir nieko neskaito.

Mažoje svetainėje skaičius, kylantis tada, kai niekas negalėtų skaityti, dabar turi paaiškinimą, o statistikos puslapyje jis pateiktas kaip Robotai (30 dienų).

Kaip jie atpažįstami

Pagal vardą, kuriuo prisistato klientas. Baiduspider, Googlebot, Amazonbot, AhrefsBot, įvairios veikimo stebėjimo tarnybos ir paprasti įrankiai, kurie neapsimeta kuo nors kitu: curl, wget, python-requests, Scrapy. Užklausa, kuri visai nepateikia vardo, taip pat laikoma robotu, nes naršyklės jį pateikia visada.

Sąrašas sąmoningai trumpas. Jis atpažįsta tik nedviprasmiškus požymius, todėl tvarkingai besielgiantys paieškos robotai aptinkami, o robotas, meluojantis, kad yra Chrome, – ne. Tokia klaidų kryptis teisinga: žmogumi palaikytas robotas yra nedidelė klaida, o kaip robotas atmestas žmogus – duomenys, kurių niekada nepavyks atgauti.

Sprendimas, kuris dar nepriimtas

Štai atvirai. Robotai vis dar įskaičiuojami į bendrus skaičius. Jie rodomi atskirai, bet didysis skaičius skaitiklyje vis dar juos apima.

Jiems neįtraukti užtenka vienos nuostatos, ir ji sąmoningai išjungta. Ją įjungus, kiekvieno šios svetainės skaitiklio matomas skaičius per naktį sumažėtų maždaug dešimtadaliu, nieko neatsiklausus. Skaitikliams, veikiantiems nuo 2007 m. ir tapusiems mažu pasididžiavimu kieno nors puslapyje, tylus bendro skaičiaus dalies atėmimas nėra neutrali techninė pataisa.

Todėl pirmiausia šis skaičius parodomas. Jei jį reikėtų atimti, o ne tik pateikti, verta tai išgirsti – pagalbos forma yra šioje svetainėje, o kitame jos gale yra tikras žmogus.