हर अठारहवाँ अनुरोध एक हटाए गए पेज को माँगता है

30 अगस्त को इस सर्वर ने 3,45,299 अनुरोधों का जवाब दिया। इनमें से 19,570 को 410 मिला: जान-बूझकर हटाया गया, न कि गलती से गायब। यानी हर अठारह में से एक अनुरोध।

इनके पीछे क्या है

यह सब पुराना आँकड़ों का पेज है। Stats4U 2 में हर चीज़ के लिए एक उप-पेज था — स्क्रीन रिज़ॉल्यूशन, प्लगइन, ब्राउज़र वर्ज़न, सिस्टम, यूज़र, और एक advanced सेक्शन, जिसके अपने उप-सेक्शन थे – लॉग, विफलताओं और कई दूसरी चीज़ों के लिए। नए सिरे से बने आँकड़ों के पेज में चालीस की जगह सात हिस्से हैं, और जो पते अब नहीं हैं, उनका जवाब 404 के बजाय 410 से दिया जाता है, क्योंकि वे गुम नहीं हुए: उन्हें जान-बूझकर हटाया गया है और वे वापस नहीं आएँगे।

उन 19,570 अनुरोधों के पीछे 13,657 अलग-अलग पते हैं – किसी वेबसाइट का यही हाल होता है, जब वह कभी हर काउंटर, हर सेक्शन और हर भाषा के लिए अलग पेज बनाती थी।

वह संख्या, जो क्रॉलरों के बारे में नहीं है

इनमें से 16,431 अनुरोध उन क्रॉलरों के हैं, जो सालों पहले बनाए अपने इंडेक्स को एक-एक करके खंगाल रहे हैं, और इस हिस्से में कुछ खास नहीं है। वे तब रुकेंगे, जब रुकेंगे।

3,139 अनुरोध क्रॉलरों के नहीं हैं। उनके पीछे 1,971 अलग-अलग पते हैं, जो क्रॉलर नहीं हैं – एक ही दिन में, एक ऐसे पेज पर पहुँचते हुए, जो अब मौजूद नहीं है। ये बुकमार्क हैं, फ़ोरम पोस्टों में दिए लिंक हैं, और किसी का एड्रेस बार है, जिसमें उसने वह टाइप किया, जो पहले काम करता था।

410 क्रॉलर से कहता है कि वह पते को भूल जाए। किसी इंसान को वह इसके सिवा कुछ नहीं बताता कि वह गलत जगह पर है।

जो अभी बना नहीं है

अभी कोई रीडायरेक्ट नहीं है। जो विज़िटर काउंटर 754337 के ब्राउज़र वाले आँकड़े माँगता है, उसे वाजिब तौर पर उस काउंटर के “तकनीक” हिस्से में भेजा जा सकता है, जहाँ अब यह जानकारी रहती है। इसे बनाना एक ऐसा फ़ैसला है, जिसके पीछे कोई संख्या होनी चाहिए, और वह संख्या इसी हफ़्ते आई: तब तक किसी ने गिना ही नहीं था कि कितने लोग यहाँ पहुँच रहे हैं।

इस आकार की वेबसाइट के लिए रोज़ दो हज़ार लोग कोई नगण्य संख्या नहीं हैं। यह विज़िटरों का सबसे बड़ा अकेला समूह है, जो इनमें से किसी भी माप में कभी दिखा ही नहीं था, और अब यह सूची में है।

आम सबक

410 बंद दरवाज़े का शिष्ट रूप है, और वह मशीनों के लिए है। यह सही स्टेटस कोड है, और उसके सामने खड़े इंसान के लिए यह कुछ नहीं करता।

स्टेटस कोड और पढ़ने वाला दो अलग-अलग सवाल हैं, और पहले सवाल का सही जवाब दे देने के बाद यह मान लेना बहुत आसान हो जाता है कि दूसरे का जवाब भी मिल गया। फ़र्क लॉग में दिखता है: क्रॉलर मात्रा के रूप में दिखते हैं, लोग अलग-अलग पतों के रूप में, और सिर्फ़ दूसरी संख्या बताती है कि रीडायरेक्ट बनाना सार्थक है या नहीं।