המונים ספרו רובוטים

המונים כאן ספרו רובוטים. את כולם, ללא יוצא מן הכלל. עד החודש איש כאן לא יכול היה לומר כמה, מפני ששום דבר לא מדד זאת – וסורק שמבקש תמונת מונה נראה בדיוק כמו אדם שמבקש תמונת מונה.

כעת זה נמדד. המספרים גרועים מהצפוי.

מה מראים הימים הראשונים

הספירה התחילה ב־9 באוגוסט. בכל המונים באתר הזה, חלקן של הצפיות שמגיעות מסורקים ולא מאנשים:

• 9 באוגוסט – 1,193 מתוך 16,070 צפיות, כ־7%
• 10 באוגוסט – 1,624 מתוך 20,181
• 11 באוגוסט – 1,954 מתוך 20,918
• 12 באוגוסט – 2,707 מתוך 22,740, כ־12%

אם כן, בין שבעה לשנים עשר אחוזים. ארבעה ימים אינם מגמה ולא יוצגו ככזאת – ייתכן שהשונות נובעת מהסורקים, או שהזיהוי לוכד יותר ככל שרשימת החתימות גדלה.

המספר שבאמת בולט

הממוצע מסתיר את החלק המעניין. בבדיקת מונים בודדים יום אחר יום, נמדדו 2,412 ימי־מונה, וב־631 מהם רוב הצפיות שנספרו היו של בוטים.

במילים אחרות, בכרבע מימי־המונה, רוב ה“מבקרים” לא היו מבקרים. כך נראה אתר שקט מבפנים: קומץ אנשים אמיתיים, וסיור קבוע של סורקים שלעולם אינו נעצר, לעולם אינו ישן ולעולם אינו קורא דבר.

באתר קטן, יש כעת הסבר למספר שמטפס כשלא ייתכן שמישהו קורא, והוא מופיע בדף הסטטיסטיקה תחת בוטים (30 יום).

איך מזהים אותם

לפי השם שהלקוח מוסר על עצמו. Baiduspider, Googlebot, Amazonbot, AhrefsBot, שירותי ניטור הזמינות השונים, והכלים הפשוטים שאינם מעמידים פנים אחרת: curl, wget, python-requests, Scrapy. גם בקשה שאינה מוסרת שם כלל נחשבת לבוט, מפני שדפדפנים תמיד מוסרים שם.

הרשימה קצרה בכוונה. היא מתאימה רק לחתימות חד־משמעיות, כלומר סורקים שמתנהגים כראוי נתפסים וסורק שמתחזה ל־Chrome אינו נתפס. זה סדר העדיפויות הנכון: בוט שנספר כאדם הוא טעות קטנה, ואדם שנפסל כבוט הוא מידע שלעולם אי אפשר לשחזר.

ההחלטה שעדיין לא התקבלה

הנה החלק הכנה. בוטים עדיין נכללים בסכומים הכוללים. הם מוצגים בנפרד, אבל המספר הגדול שעל המונה עדיין כולל אותם.

החרגתם היא הגדרה אחת, והיא כבויה בכוונה. הפעלתה תוריד את המספר הגלוי בכל מונה באתר הזה בכעשירית, בן לילה, בלי שאיש נשאל. עבור מונים שפועלים מאז 2007 והפכו למקור גאווה קטן בדף של מישהו, הפחתה שקטה של נתח מהסכום הכולל אינה תיקון טכני ניטרלי.

לכן מציגים קודם את המספר. אם צריך להפחית אותו ולא רק לדווח עליו, כדאי לשמוע על כך – טופס התמיכה נמצא באתר הזה, ויש אדם אמיתי בצד השני.