हेलो दोस्तों आज इस पोस्ट में Robots.txt File क्या है और वर्डप्रेस Website में Robots.txt File Add कैसे करते हैं इसके बारे में बता रहा हूं तो उसको लास्ट तक जरूर पढ़ें उसके बाद आप भी अपनी Website में Robots.txt File जरूर Add कर पाएंगे.
ब्लॉग और Website के लिए कुछ ऐसी Files होती है जो बहुत इंपॉर्टेंट होती है जैसे कि .htaccess File, साइटमैप और Robots.txt File और आज हम इस पोस्ट में जानेंगे कि अपने वर्डप्रेस के ब्लॉग और Website Robots.txt File कैसे Add करते हैं.
Robots.txt File क्या है –
Robots.txt File सर्च इंजन Crawlers (bot) को बताते हैं कि हमारी Website के कौन से पेजेस (URL) को एक्सेस करना है और कौन से पेज इसको एक्सेस नहीं करना है.
हमारी Website में बहुत सारे ऐसे प्राइवेट पेज होते हैं जिन्हें हम सर्च इंजन में इंडेक्स होने से रोकना चाहते हैं और हमारे इस काम को आसान बनाती है Robots.txt File, यदि हम अपने ब्लॉग और Website में Robots.txt File Add कर देते हैं तो सर्च इंजन को पता चलता है कि हमारी Website के कौन से पेज को इंडेक्स करना है और कौन से पेज को इंजेक्शन नहीं करना है.
जब हम नई Website बनाते हैं और उसमें Robots.txt File नहीं डालते हैं, तो जब भी हम अपनी Website का URL गूगल में सर्च करते हैं तो हमारी Website के बहुत सारे ऐसे पेज भी सर्च रिजल्ट में आते हैं जिन्हें नहीं आना चाहिए जैसे कि, Header template, Footer Template, Date template जैसे और भी बहुत सारे पेजेस सर्च रिजल्ट में दिखाई देते हैं.
Website बनाने के लिए क्या-क्या चाहिए (Important Info)
Robots.txt File को हमें अपनी Website में बहुत ही सोच समझ कर डालना चाहिए क्योंकि यदि हम गलत Robots.txt File डाल देते हैं तो हमें उसका नुकसान भी उठाना पड़ सकता है इसलिए आपको एक अच्छी Robots.txt File अपने Website में डालनी है ताकि उसका आपकी Website को फायदा हो सके.
Robots.txt File बनाना आज के समय में बहुत मुश्किल काम नहीं है ऑनलाइन ऐसी बहुत सारी Website उपलब्ध है जिनमें जाकर हम बहुत ही आसानी में कुछ ही सेकंड में Robots.txt File बना सकते हैं.
कभी-कभी ऑनलाइन Website से भी Robots.txt File बनाना काफी पेचीदा काम हो जाता है इसीलिए आपकी समस्या का समाधान करते हुए हमने काफी रिसर्च और सालों के एक्सपीरियंस से आपके लिए एक अच्छी और बेहतरीन Robots.txt File बनाए हैं जिसे हम खुद भी हमारी Website में यूज करते हैं.
यदि आप चाहें तो हमारी Website की Robots.txt File को अपनी Website में Add कर सकते हैं और Robots.txt File का फायदा उठा सकते हैं तो मैं आपको यहां पर अपनी Website की ओरिजिनल Robots.txt File दे रहा हूं.
User-agent: *
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-admin/
Disallow: /cgi-bin/
Disallow: /comments/feed/
Disallow: /trackback/
Disallow: /index.php
Disallow: /xmlrpc.php
User-agent: NinjaBot
Allow: /
User-agent: Mediapartners-Google*
Allow: /
User-agent: Googlebot-Image
Allow: /wp-content/uploads/
User-agent: Adsbot-Google
Allow: /
User-agent: Googlebot-Mobile
Allow: /
Sitemap: https://alltrickinfo.in/sitemap_index.xmlदोस्तों आपको ऊपर जो Robots.txt File दिख रही है आपको इसे कॉपी करना है और इसमें मेरी Website का जो साइटमैप का यूआरएल दिया गया है आपको उस साइड में अपनी यूआरएल को हटाकर अपनी Website का साइटमैप का यूआरएल डाल देना है और Robots.txt File को अपडेट कर देना है तो आइए जानते हैं कि वर्डप्रेस में Robots.txt File कैसे Add करते हैं.
वर्डप्रेस Website में Robots.txt File Add कैसे करें –
अपनी वर्डप्रेस Website में Robots.txt File Add करने के लिए आगे बताए गए सभी स्टेप्स को ठीक से फॉलो करें उसके बाद आप भी अपनी Website में Robots.txt File जरुर डाल पाएंगे.
Note –
नीचे बताई गई जानकारी सिर्फ उन्हीं यूजर को काम आएगी जो लोग अपनी Website में Rank Math SEO प्लगइन यूज करते हैं. तो आपको इस बात का ध्यान रखना है कि मैं यहां पर Rank Math SEO वाले यूजर के लिए Robots.txt File Website में Add करना बता रहा हूं.
1. सबसे पहले ऊपर दिया गया कोड को कॉपी करना है और मेरी Website के साइटमैप के बदले में अपनी Website का साइटमैप का URL डाल देना है. और पूरे कोड को फिर से कॉपी कर लेना है.
2. अपनी Website के साइटमैप की लिंक वाले कोड को कॉपी करने के बाद अब आप अपनी Website का डैशबोर्ड ओपन करें.
Auto Redirection क्या है? पोस्ट Auto Redirect कैसे करें
3. Website का डैशबोर्ड ओपन हो जाने के बाद आवाज लेफ्ट साइड में Rank Math पर क्लिक करें.
4. Rank Math पर क्लिक करने के बाद अब आपको कुछ ऑप्शन और दिखाई देंगे तो आप General Settings पर क्लिक करें.
5. General Settings में आने के बाद फिर से आपको यहां पर कुछ ऑप्शन दिखाई देंगे तो आप यहां पर Edit robots.txt पर क्लिक करें.
6. अब आपको यहां पर एक बॉक्स दिखाई देगा तो आपने जिस कोड को कॉपी किए हैं उसको बॉक्स में पेस्ट कर देना है और उसके बाद Save Changes पर क्लिक करें.
7. Save Changes पर क्लिक करने के बाद अब आपकी Robots.txt File सेव हो जाएगी.
8. अब ने सक्सेसफुली अपनी Website में Robots.txt File Add कर दिए हैं.
Robots.txt File Upload करने से पहले आपकी Website के जो भी प्राइवेट पेज गूगल सर्च में दिखाई दे रहे थे वह पेजेस धीरे-धीरे दिखाई देना बंद हो जाएगा और आपकी Website के सिर्फ मैन पेज ही गूगल सर्च रिजल्ट में दिखाई देंगे.
Blog Post Auto Share कैसे करें
इस तरह से हम बहुत ही आसानी से अपनी Website में Robots.txt File Upload कर सकते हैं और सर्च इंजन को बता सकते हैं कि हमारी Website की कौन से पेज को इंडेक्स करना है और कौन से पेज को इंडेक्स नहीं करना है.
उम्मीद करता हूं आपको यह पोस्ट अच्छी लगी होगी और जरूर कुछ ना कुछ नया सीखने को मिला होगा दोस्तों यदि आपको यह पोस्ट अच्छी लगी तो मेरे चैनल को सब्सक्राइब वीडियो को लाइक और शेयर जरूर करें मैं आपसे मिलूंगा नेक्स्ट वीडियो में तब तक के लिए Bye जय हिंद दोस्तों.
