Solve the Discovered or Crawled currently not indexed Error in Google Search Console

अगर आपको लगता है कि अपनी वेबसाइट को रैंक करना सबसे कठोर काम है तो एक उससे बात करके देखिये जिसे अपनी वेबसाइट को Index करवाने में Issues आ रहे है क्यूंकि जब वेबसाइट index ही नहीं होगी तो रैंक कैसे होगी ! ये Indexing Problems क्यों आती है, इसके बहुत सारे Reasons हो सकते है | अगर आपको भी Google Search Console में Discovered Currently Not Indexed या Crawled Currently Not Indexed जैसे Errors देखने को मिलते है तो ये एरर क्या है, इसके क्या कारण है और इसका क्या हल हो सकता है – इन सबके बारे में हम इस आर्टिकल में बात करेंगे !

आपकी वेबसाइट चाहे बड़ी, छोटी, ब्लॉग या बिज़नेस वेबसाइट या फिर आपकी किसी भी तरह की वेबसाइट है, हर प्रकार की वेबसाइट पर ये ये issue आ सकते है। इन सभी प्रकार की वेबसाइट पर आप क्या-क्या स्टेप्स ले सकते है ये भी आप इस कंटेंट में जानेंगे।

How Search Engines Work?

Discovered Currently Not Indexed का मतलब बड़ा ही सिंपल है लेकिन इसमें सर्च इंजन का काम करने का पूरा फार्मूला लिखा हुआ है अगर आप इसको ध्यान से पड़ेंगे तो! Google या किसी भी सर्च इंजन के काम करने के सामान्यतः चार स्टेप्स होते है –

1. Discovery

मान लीजिये आपका पेज है – examle.com/page100.html , Discovery में सर्च इंजिन्स को पता लगता है कि  examle.com/page100.html नाम का कोई पेज भी है। ये जानकारी सर्च इंजिन्स को कही से भी मिल सकती है जैसे –

• हो सकता है, आपके Sitemap में इस पेज के URL को सबमिट किया गया हो, या
• आपके किसी ऐसे पेज में इस पेज का लिंक डाला गया हो जिसे Google पहले से ही क्रॉल कर चूका है या
• हो सकता है  किसी दूसरी वेबसाइट पर आपके इस पेज का लिंक मौजूद हो

कारण चाहे जो भी हो Google को आपके इस पेज के बारे में पता लगा गया है, उसने इस पेज को खोज लिया है।

2. Crawling

इस स्टेप में Google Bot ने आपके पेज को क्रॉल कर लिया है। Search Engine bot आपके पेज  examle.com/page100.html तक गया, उसने html कंटेंट को देखा, CSS, JS और Images को डाउनलोड किया और आपके पेज को प्रस्तुत कर लिया है।

3. Indexing

Indexing यानि Search Engine bot ने आपके पेज को Index कर लिया है। आपके पेज को सर्च इंजन ने इंडेक्स कर लिया है, उसे आपका पेज लाभदायक लगा और उसने आपके इस पेज की एक कॉपी अपने पास सेव कर ली है और इस पेज को उन pages की लिस्ट में जोड़ दिया है जिन्हे वो इंडेक्स कर रहा है।

4. Ranking

जब एक यूजर सर्च इंजन में एक कीवर्ड सर्च करता है उस वक्त सर्च इंजन अपनी इंडेक्स में से उपयोगी पेजों की एक लिस्ट निकालता है, उसे यूजर के लिए रैंक करता है और फिर सर्च रिजल्ट्स पेज पर उन्हें दिखाता है, इसे हम Ranking कहते है।

ये थे वे चार स्टेप्स जिनके द्वारा सर्च इंजन किसी पेज को रैंक करता है। अब हम Google Search Console में आने वाले दो सबसे बड़े एरर Crawled Currently Not Indexed और Discovered Currently Not Indexed के उपर प्रकाश डालते है और देखते है कि कैसे हम अपनी वेबसाइट को इन दोनों Errors से मुक्ति दिला सकते है –

How to fix Crawled Currently Not Indexed Error:

अगर आपके किसी पेज पर Google Search Console में URL Inspection करते वक्त ये Crawled Currently Not Indexed का मेसेज आता है तो इसका अर्थ है की गूगल ने आपके पेज को Crawl कर लिया है और उसे पढ़ भी लिया है लेकिन Google के System के मुताबिक आपका कंटेंट इस लायक नहीं है कि उसे Index किया जाये इसलिए Google ने आपके पेज को अभी  Index नहीं किया है|

अब इस मेसेज के मिलने के बाद आपके Re-indexing की Request या कोई भी ट्रिक Use करने पर आपको कोई भी results नहीं मिलेंगे क्यूंकि आप ऐसी ट्रिक्स से गूगल को Convince नहीं कर सकते है | Google को आपके इस पेज का कंटेंट इंडेक्स करने के लायक नहीं लगा | अब इंडेक्स ना करने के भी अलग-अलग कारण हो सकते है-

1. अगर आपका कंटेंट Google के हिसाब से हाई क्वालिटी नहीं है तो तो भी Google उसे क्रॉल करके इंडेक्स करने से मना कर सकता है | आपको ये याद रखना चाहए कि Google Pages को इंडेक्स इसलिए करता है ताकि आगे भविष्य में उन्हें सर्च रिजल्ट्स में दिखा सके, लेकिन अगर आपका कंटेंट ऐसा है जो पहले से ही 2000 वेबसाइट पर उपलब्ध है तो आपके पेज को इंडेक्स करने का Google के पास कोई कारण नहीं है | ऐसी परिस्थिति में आपको अपने पेज के कंटेंट को ध्यान से देखना चाहिए और उसे सही करना चाहिए |

आपको अपना सबसे ज्यादा ध्यान अपने कंटेंट को यूनिक बनाने पर देना चाहिए | ये आप खुद निर्धारित करे कि आप अपने कंटेंट की तरफ किस प्रकार से ऑडियंस को आकर्षित कर सकते हो | अगर संभव हो तो आप अपनी वेबसाइट में ऐसे कंटेंट को पोस्ट करे जिसके बारे में किसी ने भी ना बताया हो और अगर बताया भी हो तो आप से अच्छे ढंग से उसे प्रस्तुत ना किया हो तभी आप Google की नज़र में अपनी वेबसाइट की अथॉरिटी बना पाओगे |

2. हो सकता है आपका कंटेंट छोटा या पढने योग्य न हो | इसके आलावा हो सकता है आप अपने Users को गुमराह कर रहे हो | कई बार लोग अपने Title और Description में कुछ और लिखते है और वे अपने आर्टिकल में कुछ और ही बता रहे होते है | वे अपने Title और Description और Catchy बनाने के लिए उसका Meaning ही बदल देते है |

अगर आप अपने आर्टिकल में कोई ऐसी इनफार्मेशन शेयर करते हो जिसमे आप लोगो को किसी चीज के बारे में भटका रहे हो तो भी गूगल आपके पेज पर ये Crawled, Currently Not Indexed का एरर दे सकता है |

3. कई बार Google कुछ Specific पेजों को सम्पूर्ण वेबसाइट की क्वालिटी  के आधार पर भी अस्वीकार करने लग जाता है। अगर वेबसाइट का सम्पूर्ण कंटेंट ही खराब है तो Google पहले से ही आपकी वेबसाइट को अस्वीकृत सूची में डाल चूका है तो Google को आपके एक और पेज को इंडेक्स करने में कोई रूचि नहीं है।

A. अगर आपकी वेबसाइट बहुत पुरानी नहीं है लेकिन फिर भी जब आप कोई नया पेज या पोस्ट अपलोड करते है तो ये समस्या ‘Crawled Currently Not Indexed‘ आपको दिखाई देती है तो इसका ये अर्थ है कि Google आपकी पूरी वेबसाइट को खराब रेट कर रहा है।

इसको टेस्ट करने का बड़ा ही आसान तरीका है, आप एक सामान्य पाठक की तरह अपनी वेबसाइट को देखिये। मान लीजिये आपकी वेबसाइट कल को नहीं रहती है तो एक नार्मल Reader का क्या नुकसान होगा? आप अपने नुकसान के बारे में ना सोचकर अपने पाठक के नुकसान के बारे में सोचिये। अगर आपकी वेबसाइट ना होने पर उसे वही जानकारी किसी भी दूसरी वेबसाइट से मिल जाती है तो Google के पास आपकी वेबसाइट को इंडेक्स करने का कोई कारण नहीं है।

4. जब आपकी साईट किसी दूसरी वेबसाइट के साथ ज्यादा attached होती है तो भी ये Crawled Currently Not Indexed का एरर आपको देखने को मिल सकता है | ऐसा नहीं है कि आपको हमेशा अपने आर्टिकल्स में पोपुलर साइट्स पर ही बात करनी चाहिए लेकिन अगर आप सबसे अलग हटकर अपनी बात को रखना चाहते है तो आपको अपनी बात को सपोर्ट करने के लिए कुछ भरोसेमंद Sources के लिंक भी देने चाहिए |

कुछ ऐसी websites को अपने पेज पर लिंक दीजिये जो पोपुलर हो और आपके Views और आपकी बात को सपोर्ट करती हो या पहले ही उस विश्ववशनीय वेबसाइट से अपनी वेबसाइट के लिए लिंक लीजिये | ये सारा मसला गूगल का भरोसा जितने का है |

इसलिए इस एरर के लिए आपको अपने कंटेंट पर ध्यान देने आवश्यकता है और अगर आपका कंटेंट ऐसा है जो Disputed या वाद-विवाद को पैदा कर सकता है तो गूगल को Outbound Links और Inbound Links के जरिये भरोसा दिलाईये जिससे शायद आपका issue Solve हो जाये |

How to fix Discovered Currently Not Indexed Error:

अब Discovered Currently Not Indexed का मतलब ये हुआ कि Google को आपके पेज या URL के बारे में पता लग गया है लेकिन उसने इसे ना तो क्रॉल किया है और ना ही इंडेक्स किया है लेकिन हो सकता है कि आगे चलकर वो इसे इंडेक्स कर भी ले और ना भी करे। इसकी कोई गारंटी नहीं है लेकिन Google को आपके इस पेज के बारे में पता लग गया है।

ये Issue देखने में Crawled, Currently Not Indexed जैसा ही लगता है लेकिन है नहीं | इस एरर का मतलब है कि गूगल को आपके इस पेज के बारे में पता चल गया है लेकिन गूगल उसे या तो Crawl नहीं कर सकता है या Crawl करना नहीं चाहता है | आईये जानते है कि ये एरर आपकी वेबसाइट पर किन कारणों से आ सकता है और इन्हें आप कैसे दूर कर सकते है –

1. यहाँ पर हमने दो बात कही है, एक तो Google क्रॉल नहीं कर सकता है और दूसरी क्रॉल करना नहीं चाहता है जिसमे क्रॉल नहीं कर सकता है   का अर्थ है कि Google के Crawl Budget में कोई Issue आ रहा है | गूगल हर वेबसाइट को उसके साइज़ और उसकी इम्पोर्टेंस के हिसाब से एक क्रॉल करने का Time कोटा देता है कि इस्त्ने टाइम तक Google Bot उस वेबसाइट को Crawl करेगा |

लेकिन अगर आपकी वेबसाइट क्रॉल करने में गूगल के इस फिक्स टाइम से ज्यादा समय लेती है तो गूगल इस टाइम ,लिमिट के बाद आपकी वेबसाइट के जितने भी Pages बचेंगे उन्हें वो क्रॉल नहीं करेगा जिससे आपके पेज की Indexing रुक सकती है |

ये Crawl Budget की समस्या 10,000 से ज्यादा Pages वाली वेबसाइट में ही आती है और इससे छोटे पेजेज वाली websites को Crawl Budget के बारे में चिंता करने की कोई आवश्यकता नहीं है |

जिन websites में  10,000 से ज्यादा पेजेज है, उन्हें चेक करना चाहिए कि आप कही पुराने Pages, Outdated Tags और Useless Categories को तो इंडेक्स करके अपना Crawl Budget बर्बाद तो नहीं कर रहे है !

2. इसलिए 10,000 से छोटी websites में इस इशू Discovered Currently Not Indexed के आने का अर्थ है दूसरी बात, जो हमने उपर कही है कि गूगल आपके पेज को Crawl नहीं करना चाहता है !  

इसका मतलब है कि गूगल को लगता है कि ये पेज इस लायक नहीं है कि इसे Crawl भी किया जा सके Index की तो बात ही दूर है |

अब इसका समाधान है गूगल को अपने Page की Importance समझाना ! इसके लिए –

A. आप अपने पेज में Internal Links का use करिए | अपने पहले से Indexed pages में इस नये पेज को लिंक दीजिये | Relevant Anchor Text से जब आप अपने इस नये पेज को लिंक करेंगे तो इससे गूगल को आपके उस नये पेज को क्रॉल करने का Hint मिलता है|

B. Internal Links के आलावा अगर आप अपने इस नये पेज के लिए कुछ External Links भी Generate कर सकते है तो जरुर कीजिए, इससे आपके इस पेज के इंडेक्स होने के chances और बढ़ जाते है |

3. हो सकता है जब Google आपकी वेबसाइट को Crawl करने आता है तो उस समय आपका सर्वर ही लोड नहीं हो पा रहा है और ये Issue बड़ी वेबसाइट पर ज़्यादा आता है। Google को आपके URL के बारे में पता है लेकिन जब वो आपके पेज को क्रॉल करने जाता है तब सर्वर लोड नहीं ले पाता है, और Google चाह कर भी आपके पेज को क्रॉल नहीं कर पा रहा है या इंडेक्स नहीं कर पा रहा है।

इस चीज को टेस्ट करने की एक सबसे आसान ट्रिक है वो है – Google का अपना Mobile Friendliness Testing Tool और Rich Result Tool. Google Bot जिन Resources का प्रयोग करता है उन्ही Resources को ये टूल इस्तेमाल करते है।

इसलिए अगर आप अपने किसी पेज को इन दोनों में से किसी भी एक टूल से टेस्ट करते है और ये टूल आपके उस पेज तक नहीं पहुँच पाते है, उसे टेस्ट नहीं कर पाते है तो ये एक मजबूत संकेत है कि Google Bot भी आपके पेज तक नहीं पहुँच पा रहा है। ऐसे में आपको अपने होस्टिंग प्रोवाइडर से बात करने की जरुरत है या अपने सर्वर के एडमिन से बात करने की जरुरत है।

4. अगर आपकी वेबसाइट पर एक टॉपिक पर पहले से ही बहुत सारा कंटेंट मौजूद है तो भी Google आपके नए कंटेंट को इंडेक्स करने से मना कर सकता है। ये कंटेंट कई कारणों से बहुत ज़्यादा हो सकता है-

A. आपकी वेबसाइट में यूनिक हाई क्वालिटी कंटेंट पहले से ही बहुत सारा है और आप उन टॉपिक्स को दोबारा दोहरा रहे है तो आप अलग योजना से कंटेंट लिखिए या अपने पुराने कंटेंट को अपडेट करे। बार-बार एक ही विषय पर अपनी वेबसाइट में कंटेंट लिखना तो केवल Contents की संख्या बढ़ाने के समान है | आप ये प्रयास करे कि आप किसी भी एक Quarry को अपने एक ही कंटेंट में विस्तार से हल कर दे |

आप इस किसी Quarry को छोटे-छोटे टुकडो में अलग-अलग contents में बयाँ करने का प्रयत्न ना करे | आप अपने एक कंटेंट में किसी भी एक टॉपिक पर अच्छे से पुरे विस्तार से चर्चा करे और अगर आगे उस टॉपिक के बारे में कोई ने अपडेट आती है तो आप अपने उसी कंटेंट को अपडेट करे, इससे आपकी Google में Ranking और ज्यादा सुधरेगी |

B. आजकल AI Generated कंटेंट लिखने का नया पैड आ चुका है। काफी सारी वेबसाइट पर Auto Generate Low Quality Content टूल की मदद से रोज धड़ा-धड़ आर्टिकल पब्लिश होते है। इन टूल्स से कंटेंट में इतनी ज़्यादा गलतिया होती ही कि इनको सही करने से कम टाइम एक कंटेंट खुद से लिखने में लगेगा। अगर आप ऐसे किसी टूल की मदद से ढेर सारे कंटेंट अपलोड कर रहे है तो भी Google आपके कंटेट को इंडेक्स करने से मना कर सकता है। जिसके कारण आपको Discovered – Currently Not Indexed का एरर आ सकता है |

C. अगर आपकी साइट में Canonical tags को सही तरह से इस्तेमाल नहीं किया जा रहा है और आपके https, http, www और // वाले सारे Version अलग-अलग खुल रहे है तो इसका मतलब Google आपके एक पेज को 10-12 तरीको से देख रहा है और साथ में इंडेक्स भी कर रहा है तो ऐसे में Google आपके कंटेंट को इंडेक्स  करने से मना कर सकता है।

(अगर आप अपनी साइट में Canonical tags को सही तरिके से सेट करना चाहते है तो यहाँ set canonical tags पर क्लिक करे)

Last Word:

Friends, ये थे वे पांच कारण जो आपकी वेबसाइट में ये दोनों Indexing से रिलेटेड Errors की समस्या उत्पन्न कर सकते है और इनको आप कैसे सुलझा सकते है ये भी साथ-साथ­ आपको बताया गया है। सबसे जरुरी है कि आप अपना कंटेंट अच्छा रखिये और अपनी साइट को स्वस्थ रखिए, आपकी साइट में ये Crawled Currently Not Indexed की समस्या नहीं आएगी। 

अंतिम शब्दों के साथ मैं आपको ये ही कहना चाहूँगा कि अपने आर्टिकल्स को users के लिए लिखे ना कि गूगल के लिए क्यूंकि गूगल अपने users को बहुत ज्यादा प्राथमिकता देता है | अपने आर्टिकल्स के लिए मेहनत करे और अपनी एक Brand value बनाने का प्रयास करे और ये तभी सम्भव हो पायेगा जब आप अपनी एक Trusted वेबसाइट का निर्माण करने में सफल होगे |

अगर आपको ये आर्टिकल उपयोगी और जानकारीपूर्ण लगे तो इसे शेयर करना ना भूले! अगर आपके मन में कोई सुझाव या सवाल है तो Comment Section या Email के माध्यम से हमे अपना Feedback अवश्य दे | आपके द्वारा Feedback से हमे अपने Content की Quality को सुधारने में मदद मिलती है |