जब आपके मुखपृष्ठ को robots.txt फ़ाइल की आवश्यकता हो

कई वेबसाइट ऑपरेटर परेशान हैं। जाहिर तौर पर आपके पास robots.txt नाम की एक फाइल होनी चाहिए। यह क्या है?

विंडोज + लिनक्स / अंग्रेजी / ओपन सोर्स। यदि आपके पास एक मुखपृष्ठ है, तो आप आमतौर पर ढूंढना चाहते हैं। जब आपका अपना पेज Google पर दिखाई नहीं देता है तो बहुत निराशा होती है। यह robots.txt फ़ाइल के कारण हो सकता है। लेकिन केवल अगर वहाँ है। यह फ़ाइल केवल एक ही काम कर सकती है: मना करें।
robots.txt फ़ाइल में, आप चौबीसों घंटे इंटरनेट ब्राउज़ करने वाले स्वचालित प्रोग्रामों को आपके पृष्ठों तक पहुँचने से रोक सकते हैं। आप इन सभी रोबोटों के लिए या कुछ निश्चित लोगों के लिए बोर्ड भर में प्रतिबंध का उच्चारण कर सकते हैं। आप अपने पेजों को पूरी तरह या केवल कुछ क्षेत्रों को ब्लॉक कर सकते हैं।
यदि फ़ाइल मौजूद नहीं है, तो तदनुसार कोई प्रतिबंध नहीं है। आपके पृष्ठ सभी खोज इंजनों के लिए खुले हैं। यदि आप अभी भी Google पर प्रकट नहीं होते हैं, तो एक पूरी तरह से अलग प्रश्न उठता है: क्या आपने पहले ही अपने पृष्ठ पंजीकृत कर लिए हैं? करने के लिए सबसे अच्छी बात यह है कि इसे तुरंत करें। बस यहां पता दर्ज करें:
https://www.google.com/webmasters/tools/submit-url
ऐसा करने के लिए, आपको अपने Google खाते में साइन इन करना होगा।
किसी अनुपलब्ध robots.txt फ़ाइल के लिए एक समस्या होने के लिए, सर्वर को भी गलत तरीके से कॉन्फ़िगर करना होगा। फिर एक रोबोट फ़ाइल तक पहुँचने का प्रयास कर सकता है और असामान्य त्रुटि संदेशों का सामना कर सकता है, जिससे प्रक्रिया निरस्त हो सकती है। लेकिन इस मामले की संभावना बहुत कम है।
यदि आप robots.txt फ़ाइल बनाना चाहते हैं, तो इसे अपने वेब सर्वर के मुख्य फ़ोल्डर में सहेजें। यदि आप सभी को सब कुछ करने की अनुमति देना चाहते हैं, तो इसमें निम्नलिखित लिखें:
उपयोगकर्ता एजेंट: *
अस्वीकार करें:
लाइन "यूजर-एजेंट" इंगित करती है कि किस पर प्रतिबंध लागू होता है। *अर्थ: सबके लिए। लाइन "अस्वीकार करें" निषेध व्यक्त करती है। अगर और कुछ नहीं है, तो इसका मतलब है कि सभी एक्सेस की अनुमति है।
विषय पर अधिक:परदे के लिए, यहाँ आपकी वेबसाइट आती है: थोड़े से प्रयास से वेबसाइट कैसे बनाएं