Blogger में custom robot txt कैसे add करें? How to add Custom robot.txt in blogger blog? क्या आप जानते है की custom robot txt क्या है और इसे ब्लॉग में कैसे add करते है अगर नहीं तो हम आपको बताएँगे की इसे blogger में कैसे add करें?

Blogger में custom robot txt कैसे add करें?

Blogspot blog एक warning देता है की अगर आपको ये setting के बारे में अच्छे से जानकारी नहीं है तो आप इसे set न करे क्योकि इससे आपके ब्लॉग पर effect पर सकता है that means search engine ranking में इससे पड़ सकता है|

अगर आप नहीं जानते है की इसकी setting कैसे करे तो कोई बात नहीं हम आपको बतायेंगे की आप इसकी setting कैसे करें? इससे पहले हम जानेंगे की custom robot.txt क्या है?

Read Also: Blogger ब्लॉग में search description enable कैसे करें?

Custom robot.txt क्या है?

robot.txt एक text file है जो की अपने अन्दर कुछ कोड को store रखता है| यह हमारे private data को search engine से hide करने का काम करता है that means वैसा URL जिसे हम search engine में index नहीं करना चाहते है| for example: label, categories.

कोई भी search engine webpage को crawl that means index करने से पहले उस blog और वेबसाइट का robot.txt file को crawl या चेक करता है उसके बाद webpages को index करता है|

जो भी ब्लॉग blogger पर बने है उसके लिए blogger default custom robot.txt file बनाया है जो की इस प्रकार है|

User-agent: Mediapartners-Google
Disallow: 

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://www.guptatreepoint.com/sitemap.xml

इस कोड को एक एक करके पहले हम जान लेते हैं उसके बाद सीखेंगे की blogspot ब्लॉग में custom robot txt कैसे add करते हैं|

User-agent: Mediapartners-Google

यह कोड robot.txt file का सबसे पहला line होता है जो की Google के mediapartners के लिए use किया जाता है like Google Adsense. यह Google adsense के ads को बेहतर रूप से दिखाने में हेल्प करता है|

Disallow:

यह robot.txt file में एक बार जरुर होना चाहिए| यह Google search engine को कुछ webpages को index होने से रोकता है जैसे की label, ?m=1

Disallow: /search यह वैसे webpages को index होने से रोकता है जिसमे domain नाम के बाद search keyword लगा हुआ रहता है जैसे की www.guptatreepoint.com/search/computer

Allow:

यह सभी webpages को crawl करने के लिए allow करता है ताकि Google search engine वैसे सभी webpage को index करे जो की Disallow नहीं किया गया है|

Sitemap.xml

यह एक xml file होता है जो की blog और website के सभी webpages को एक जगह पर store करके रखता है ताकि Google और other search engines को पोस्ट index करने में परेशानी ना हो| sitemap.xml file के हेल्प से search engine आपके blog posts को आसानी से index कर सकता है|

आपने बहुत सारे blog पर देखा होगा की blogger के लिए http://example.blogspot.com/feeds/posts/default?orderby=UPDATED ये वाला sitemap add करने के लिए कहते है जबकि Google के ब्लॉग में इसका कही भी जिक्र नहीं है|

that means अभी Google search console का नया version आ चूका है जिसे beta version नाम दिया गया है| वो blogger के लिए केवल sitemap.xml ही सपोर्ट करता है अगर आप atom.xml वाला sitemap add करते है तब वह show करता है की आपने अभी तक sitemap सबमिट नहीं किया है|

यदि आप भी अपने blogger that means blogspot ब्लॉग के लिए atom.xml वाला sitemap add किये है तो उसको remove करके sitemap.xml वाला sitemap submit करें| इसके लिए आप Google का blog भी पढ़ सकते है| (click here to read Google blog)

Blogger blog में custom robot.txt कैसे add करें?

यदि आपका ब्लॉग blogger platform पर चल रहा है और आप अपने blogger में custom robot.txt add करना है तो निचे दिए गए steps को follow करें| एक बात का हमेशा ध्यान रखे की कभी भी robot.txt file में गलत कोड add न करे क्योकि इससे आपके ब्लॉग के ranking पर effect पड़ सकता है|

सबसे पहले निचे दिए गए code को कॉपी कर लें|

User-agent: Mediapartners-Google
Disallow: 

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://www.guptatreepoint.com/sitemap.xml

1.  अब उसके बाद अपने blogger डैशबोर्ड को open करें

2. उसके बाद blogger डैशबोर्ड के बगल में that means left side में Setting पर click करें और उसके बाद Search preferences पर click करें|

3. अब blogger डैशबोर्ड में Crawler and indexing area के अन्दर Custom robot.txt के सामने Edit option पर click करें और उसके बाद Yes option को select करें|

4. अब एक code box open होगा जिसमे आपको ऊपर दिए गए कोड को that means जो code आपने कॉपी किया था उसको paste करना है और उसके बाद example.com के जगह पर अपना ब्लॉग का URL add करना है|

5. यदि आपने अभी तक custom domain add नहीं किया है तो आप अपने sub-domain के URL को add करें|

6. At last, Save Changes पर click करें|

Congratulations! आपने अपने blogger ब्लॉग में custom robot txt को add कर चुके है|

Read Also: Blogger blog में custom domain कैसे add करें?

Custom robot.txt को कैसे चेक करें?

अब सवाल यह उठता है की हम कैसे चेक करें की हमारे ब्लॉग में custom robot.txt add हुआ है या नहीं| अगर आप इसे check करना चाहते है तो कोई बात नहीं हम बताते है की आप इसे कैसे चेक करें|

browser का नया tab open करें और उसके बाद अपने blog URL के just आगे /robot.txt लिख कर enter करें| for example: https://www.guptatreepoint.com/robot.txt

मैंने अपना blog वर्डप्रेस पर transfer कर लिया है इसलिए मेरा sitemap दूसरा show कर रहा है| यह पोस्ट मैंने blogger platform के यूजर के लिखा है|

Final words

मैंने इस tutorial में बताया की blogger ब्लॉग में custom robot txt कैसे add करें? How to add custom robot.txt file in blogger blog? मुझे उम्मीद है की आपने अपने ब्लॉग की setting अच्छे से कर लिए होंगे यदि इससे related कोई भी problem हो तो आप हमसे comment box के through पूछ सकते हैं मैं आपके सवालों के जवाब जल्द से जल्द देने की कोशिश करूँगा|

यदि आप हमारे ब्लॉग पर कोई भी post publish करवाना चाहते है तो आप हमसे contact कर सकते है या आप अपना पोस्ट हमे mail कर सकते हैं अगर आपका पोस्ट हमे पसंद आएगा तो हम आपके पोस्ट को आपके नाम से साथ publish करेंगे| मेरा email id है guptatreepoint [at] gmail.com