प्लेटफ़ॉर्म पर बनी 71% साइटों का पहला पेज डिप्लॉय के 48 घंटों के भीतर Google द्वारा इंडेक्स हो जाता है। कुछ सौ लाइव बिल्ड के एक रैंडम सैंपल में औसत Lighthouse परफ़ॉर्मेंस स्कोर 94 है। "पब्लिश" से Search Console में पहले ऑर्गैनिक इंप्रेशन तक का औसत समय छह दिन है। और जो साइटें बारह या उससे ज़्यादा पेजों के साथ लॉन्च हुईं, उन्हें सिर्फ़ होमपेज के साथ लॉन्च होकर बाद में पेज जोड़ने वाली साइटों के मुकाबले लगभग तीन गुना तेज़ी से पूरी तरह क्रॉल किया गया।
पहले तीन आँकड़े वही हैं जिनके बारे में लोग पूछते हैं, और ये उबाऊ, अपेक्षित तरह के अच्छे हैं — साफ़-सुथरा HTML, समझदार मेटा टैग, रेंडर को रोकने वाला कोई कचरा नहीं, इसलिए Googlebot को आसानी होती है और Lighthouse को शिकायत करने को कुछ नहीं मिलता। मशीनें संरचनात्मक रूप से सही पेज बनाने में अच्छी होती हैं। किसी को हैरानी नहीं कि स्वचालित आउटपुट औसत हाथ से कोड किए गए WordPress थीम को तकनीकी ऑडिट में पीछे छोड़ देता है।
पेज-काउंट वाला आँकड़ा वह है जिसने हमें क्वेरी दोबारा जाँचने पर मजबूर किया, क्योंकि यह उस सलाह के उलट जाता है जो लोग पहली बार साइट बनाने वालों को सबसे पहले देते हैं: कुछ छोटा भेजो, उसे लाइव करो, फिर सुधारते रहो। यह सलाह गति बनाए रखने के लिए ठीक है। लेकिन इंडेक्सिंग की गति के लिए यह बुरी है, और इसकी वजह है क्रॉल बजट — एक ऐसी अवधारणा जिसके बारे में पहली बार साइट बनाने वाले ज़्यादातर लोगों ने कभी नहीं सुना, और सच कहें तो उन्हें इसकी ज़रूरत भी नहीं होती, जब तक कि उनकी साइट दो हफ़्ते तक इंडेक्स न हो और वे यह समझ न पाएँ कि क्यों।
किसी नई साइट के लिए क्रॉल बजट का असल मतलब क्या है
Googlebot हर विज़िट पर हर साइट के हर पेज को नहीं क्रॉल करता। नए डोमेन को खासतौर पर एक मामूली भत्ता मिलता है — कुछ ही रिक्वेस्ट, कई दिनों में फैली हुई, जब तक बॉट साइट पर इतना भरोसा नहीं बना लेता कि उस पर ज़्यादा ध्यान देने लगे। सिंगल-पेज लॉन्च क्रॉलर को देखने के लिए बिल्कुल एक ही चीज़ देता है, इंटरनल लिंक का एक सेट (आमतौर पर कोई नहीं), और वहाँ और क्या है इसका कोई संकेत नहीं। वह वापस आता है, वही एक पेज देखता है, और अगली बार जल्दी वापस आने की उसके पास कोई ठोस वजह नहीं होती।
बारह पेजों वाला लॉन्च बिल्कुल अलग चीज़ होता है। इसमें पहले ही दिन एक इंटरनल लिंक ग्राफ़ होता है:
- नैव लिंक
- फ़ुटर लिंक
- शायद तीन पोस्ट की ओर इशारा करता एक ब्लॉग इंडेक्स
- एक-दूसरे की ओर इशारा करते कुछ कैटेगरी पेज
Googlebot पहले पेज को क्रॉल करते समय दूसरा पेज खोज लेता है, उसे कतार में डाल देता है, और अक्सर एक हफ़्ते में फैली हुई एक-पेज-प्रति-विज़िट प्रक्रिया के बजाय एक ही विज़िट में कई पेज फ़ेच कर लेता है। साइट ऐसा व्यवहार करती है मानो उसमें एक भी बैकलिंक बनने से पहले ही गति आ गई हो, क्योंकि यह गति संरचनात्मक होती है, अर्जित नहीं।
यही वजह है कि "बाद में पेज जोड़ो" वाला तरीका देखने में जितना ठीक लगता है, असल में उससे कहीं ज़्यादा कमज़ोर है। जब भी कोई पतली साइट नया पेज जोड़ती है, वह क्रॉलर से ऐसे डोमेन पर बदलाव नोटिस करने की माँग कर रही होती है जिसे वह पहले ही कम-प्राथमिकता वाला मान चुका है। यह शुरुआत से ही क्रॉलर को डोमेन को प्राथमिकता देने की वजह देने के मुकाबले धीमा चक्र है। हमने देखा है कि साइटें एक महीने में तीन से पंद्रह पेजों तक पहुँच जाती हैं और उनकी क्रॉल फ़्रीक्वेंसी मुश्किल से हिलती है, जबकि पहले ही दिन पंद्रह पेजों के साथ लॉन्च हुई साइट एक हफ़्ते के भीतर पूरी तरह इंडेक्स हो जाती है।
यह असल में बिल्डर में कहाँ दिखता है
यही वजह है कि सर्च में मिलने के मकसद वाली किसी भी चीज़ के लिए प्लानिंग स्टेज कुछ असली पेजों की ओर धकेलती है — फ़िलर नहीं, बल्कि असली सामग्री वाले असली पेज:
- एक अबाउट पेज
- कुछ फ़ीचर या यूज़-केस पेज
- अगर साइट के प्रकार को ज़रूरत हो, तो शुरुआती एक-दो ब्लॉग पोस्ट
बिना किसी गंतव्य वाला लैंडिंग पेज किसी असली साइट का छोटा रूप नहीं है, यह क्रॉलर के आँकने के लिए एक अलग, बदतर श्रेणी की चीज़ है। बिल्ड शुरू होने से पहले जिस प्लान को आप मंज़ूर करते हैं, वहीं यह तय होता है, और अगर आपका लक्ष्य ऑर्गैनिक ट्रैफ़िक है तो ऐसे प्लान पर सवाल उठाना सही है जो आपको सिर्फ़ एक पेज देता है — तरीका जानने के लिए reading the plan, and changing it देखें।
यह उन हिस्सों की जगह नहीं ले सकता जिनमें, आप चाहे जितने भी पेजों के साथ लॉन्च करें, लंबा समय लगता ही है — बैकलिंक, विषय-संबंधी प्राधिकार, वह बीस-पेज की कंटेंट हिस्ट्री जो असल में Google को यकीन दिलाती है कि आप किसी स्थापित प्रतिस्पर्धी से ऊपर रैंक करने लायक हैं। बारह अच्छी तरह से संरचित पेजों और शून्य बाहरी लिंक वाली साइट, दूसरे हफ़्ते में किसी प्रतिस्पर्धी शब्द के लिए आठ साल पुराने डोमेन को पीछे नहीं छोड़ने वाली। पेज-काउंट का असर आपको जो देता है वह उबाऊ इंफ्रास्ट्रक्चर वाला हिस्सा है: खोजे जाना, क्रॉल होना, इंडेक्स होना, ताकि आप बाद में जो सामग्री पब्लिश करें, उसके पास उतरने की जगह हो, न कि वह महीनेभर अदृश्य पड़ी रहे जबकि क्रॉलर धीरे-धीरे यह पता लगाता रहे कि आप मौजूद भी हैं।
तकनीकी स्कोर अब बस बुनियादी योग्यता हैं — कोई भी गंभीर बिल्डर, चाहे AI हो या न हो, अगर कोई जाँचने की ज़हमत उठाए तो 90+ Lighthouse स्कोर हासिल कर सकता है। जो चीज़ असल में ऑप्टिमाइज़ करने लायक है, और जिसके बारे में लगभग कोई तब तक नहीं सोचता जब तक इससे उसे दो हफ़्ते न गँवाने पड़ें, वह है क्रॉलर को एक बार से ज़्यादा आने की वजह देना।
