Robots.txt File Kya Hai और Blogger Me Robots.txt File Kaise Add Kare



आज मे आपको Robots.txt File Kya Hai इसके बारे में बताने वाला हु अगर आपको Robots.txt File Kya Hota Hai इसके बारे में जानना है तो यह आर्टिकल पुरा पढे Robots.txt File आपकी Blog Website के लिए बहुत जरूरी है। robot.txt file एक robot की तरह होता है जो हमारे कमांड को फोलो करता है और काम करता है वैसे ही robot.txt file हम जो कमांड देते वो search engine को कमांड भेज देता है और search engine आपके blog में जो भी update हुआ है उसको अपने सर्वर पर index करता है और लोगो तक पहुंचा ता है। Robots.txt File का सीधा संपर्क आपके blog की indexing और crawl rate से जुड़ा है तो चलिए जानते है की Robot.txt File क्या है और इसको अपने Blog में कैसे Use करते है

Robots.txt File Kya Hai

Robots.txt File Kya Hai

Robots.txt File‌ एक ऐसी File जिसको हम अपने Blog में Add करते है तो हम इसकी मदद जो भी प्रायवेट बाते है google, yahoo, bing जैसे Search engine से छिपा सकते है। Robot.txt File के अन्दर हम जो भी कमांड लिखते है उसके बाद जब भी कोई search engine आपके Blog पे आएगा Post को index करने के लिए तो उसको एक कमांड जाएगा की आप इस blog website इस सब चीजों को index करो और इन सब चीजों को index ना करो। Robots.txt File‌ आपकी हर एक post और page में होता है और Robots.txt File‌ आपकी blog की जोभी प्रायवेट बाते है उसका Google, Yahoo, Bing जैसे Search Engine से छिपा ता है और इन सभी Search Engine को बताता है की  कोनसा पार्ट index करे और कोनसा नहीं.



Robots.txt File क्यो जरूरी है

अगर आप Robots.txt File अपनी वेबसाइट में नहीं Add करते हैं तो जब भी Search Engine आपके Blog पर Indexing के लिए आएगा तो वो आपके सभी Content और Page को Index कर लेगा और इससे आप जो चीज Google Search में नहीं दिखाना चाहते है वो भी दिखने लगेगा लेकिन

अगर आप Robots.txt File अपनी वेबसाइट में लगाते हैं तो जब भी Search Engine आपकी Website पर आएगा तो वो आपके Robots.txt File में लिखे गए Text को Follow‌ करके ही Indexing करना सुरु करेगा और इससे आप जो नहीं दिखाना चाहते वो Google Search में नहीं दिखेगा
जरूर पढ़े :-

Robots.txt File को Use करने के क्या फायदे हैं?

  • आप इसके द्वारा Search Engine को बता सकते है कि वो आपकी Website में से इन सभी चीजों को Index करे और इन सभी चीजों को Index न करें
  • आप अपने Website के Duplicate File और Page को Noindex करा सकते है
  • आप इसके द्वारा Category, Author Page और Comments को Noindex करा सकते है
  • आप इसके द्वारा अपनी Website मे दिए गए Video या Image को Noindex करा सकते है
  • आप इसमें Sitemap को Add करके अपनी पोस्ट को जल्द Search Engine में Index करा सकते है
  • आप अपनी Website को Secure कर सकते है
  • आप इसके द्वारा Low Quality Post को भी Block कराके अपनी Website का SEO कर सकते है

Robots.txt File Kaise Banaye

वैसे तो Robots.txt File बनाने वाली कई सारी वेबसाइट इन्टरनेट पर मोजुद है लेकिन आपको Robots.txt File बनाने के लिए internet पर जाके robot.txt बनाने वाली website ढुढने की कोई कोई जरूरत नहीं क्युकी में आपको आज यहां पर वो robots.txt file के वो code देने वाला हु जो Blogger ने बताए हुए हैं और आप Blogger help forum में जाकर देख सकते हो। अगर आप ये देखना चाहते हो तो उसके लिए यहाँ पर click कीजिए 



आपको नीचे दिए गए robot.txt file के Code को पहले समझ ते है
User-agent: Mediapartners-Google
 Disallow:
 User-agent:
 Disallow: /search
 Allow: /
 Sitemap: https://www.hindiuser.com/sitemap.xml

1. User - agent: Mediapartners - Google : इसकी मदद से आप Google AdSense Code को User से छिपा सकते है और अगर आप Google AdSense Use नहीं करते है तो यह Code आपके लिए उपयोगी नहीं है 

2. User - agent :  इस को Use करके आप अपनी Website में User को जो दिखाना चाहते है वो दिखा सकते है और जो दिखाना नहीं चाहते वो नहीं दिखा सकते है आप इसको हमेशा Disallow ही रहने दीजिए क्युकी यह आपके Website की Security के लिए बहुत जरूरी है

3. Disallow: /search : अगर आप अपनी website के keyword को नहीं दिखा चाहते है तो आप इसको हमेशा Disallow ही रहने दे और आप जो भी Post को Google में नहीं दिखाना चाहते उसकी URL को यहां Paste करके उसको Disallow कर सकते है

4. Allow : यहां पर आप User को जो दिखाना चाहते वो दिखा सकते है और आप हमेशा इसको allow ही रहने दे

5. Sitemap : Sitemap आपके Blog के लिए बहुत जरूरी है क्युकी Sitemap आपके Blog की New Post की जानकारी Search Engine को देता है और Sitemap इसक अलावा और भी बहुत कुछ काम करता है जैसे कि कोनसी Post Popular है, कीस Post में कीतनी Url है etc.

जरूर पढ़े :-

Blogger Me Robots.txt File Kaise Add Kare

Step 1: 

  1. सबसे पहले आपको blogger.com पर जाना है

blogger me custom robot.txt kaise add kare

  1. उसके बाद आपको Setting पर Click करना है
  2. अब आपको search preferences पर click करना है
  3. और उसके बाद आपको Custom robots.txt पर Click करना है

Step 2 : 
  1. अब आप Yes पर Click करे
  2. अब आपके सामने एक Box Open होगा
  3. इसमें आपका नीचे दिया गया Code Copy करना है लेकिन code copy करने से पहले इसमें https://www.hindiuser.com/ की जगह खुद की website का URL add करना है
User-agent: Mediapartners-Google
 Disallow:
 User-agent:
 Disallow: /search
 Allow: /
 Sitemap: https://www.hindiuser.com/sitemap.xml

robot txt in hindi

  1. अब आपको इस Box में Code Paste करना है
  2. अब आपको Save Changes पर click करना हैं
  3. अब आपके blog में robots.txt file add हो चुकी है और कोई भी Search Engine में वही दिखेगा जो आपकी robot.txt file allow करेगा।



अपनी Website का Robots.txt File कैसे Check करे Google में?

आप Robots.txt File को Google में नीचे दिए गए तरीके से पता लगा सकते है

Step 1 : आपको Google में अपनी Website के URL के Last में robots.txt लिखकर Search करना है आप नीचे दिए Photo में भी देख सकते है

Search :- https://www.yourwebsite.com/robots.txt

Step 2 : Search करते ही आपकी Website की robots.txt File आ जाएगी आप Photo में देख सकते है

Robots.txt File Kya Hota Hai


Robots.txt File द्वारा Website के कोन कोन से Page को Noindex करना चाहिए

आपको robots.txt File के द्वारा नीचे दिए गए सभी चीजों को जरूर Noindex करना चाहिए

  • Category
  • Comments 
  • Author
  • Links
  • Admin

आपको ऊपर दिए गए सभी चीजों को Noindex करना बहुत जरूरी है

आप इन सभी को Blogger में अच्छे Noindex नहीं करा सकते है लेकिन अगर आपकी Website WordPress पर है तो आप

आप यह सब Blogger में अचछे नहीं कर सकते है लेकिन आप अगर WordPress User है तो आप Yoast SEO Plugin के द्वारा यह सब Noindex करा सकते है

आप अपने  ब्लोग को Google में Index कराने के लिए यह पढे :- Blog Ko Google Search Console Me Submit Kaise Kare

दोस्तों मुझे आशा है कि मेने आप लोगों को Robots.txt File Kya Hai और Robots.txt File Kaise Banaye इसके बारे में पुरी जानकारी आपको हमारे आर्टिकल से मिल गई होगी। आपके मन में कोई सवाल है तो Comment करके जरूर बताएं में उसका जवाब देने की पुरी कोशिश करुंगा मेरा आप लोगों से Request है कि 

यदि आपको मेरा यह पोस्ट अच्छा लगा है और इससे आपको कुछ सिखने को मिला है तो आप इसे WhatsApp, Facebook, Instagram, Twitter, Massage, Telegram, Reddit, LinkedIn, जैसे और भी Social Media पर आग की तरह Share कीजिये जिससे इसकी जानकारी और भी लोगों को मिले और वो अपने लिए वेबसाइट बना सके.

ऐसी महत्वपूर्ण जानकारी प्राप्त करने के लिए नीचे Hindi User के Newsletter लिखा है वहां अपना Gmail ID डालकर हमारे Blog को अभी Subscribe करले जीसे मे कोई भी नई पोस्ट डालु इसकी Notification आपको सबसे पहले मिले आपके Gmail पर मिले। आप अगर हमें कोई सुझाव देना चाहते है तो आप हमे Comment Box या Social Media पर Follow करके सुझाव दे सकते है 

Post a comment

2 Comments