Robots.txt Generator

Robots.txt Generator

डिफ़ॉल्ट - सभी रोबोट हैं:	अनुमत अस्वीकार करना
क्रॉल-विलंब:	डिफ़ॉल्ट - कोई देरी नहीं 5 Seconds 10 Seconds 20 Seconds 60 seconds 120 Seconds
साइट मैप: (यदि आपके पास नहीं है तो खाली छोड़ दें)
रोबोट खोजें:	Google	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Google Image	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Google Mobile	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	MSN Search	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Yahoo	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Yahoo MM	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Yahoo Blogs	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Ask/Teoma	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	GigaBlast	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	DMOZ Checker	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Nutch	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Alexa/Wayback	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Baidu	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	Naver	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
	MSN PicSearch	डिफ़ॉल्ट के समान अनुमत अस्वीकार करना
प्रतिबंधित निर्देशिकाएँ:	पथ रूट से सापेक्ष है और इसमें अनुगामी स्लैश होना चाहिए "/"

अब, अपनी रूट डायरेक्टरी में 'robots.txt' फ़ाइल बनाएं। उपरोक्त टेक्स्ट को कॉपी करें और टेक्स्ट फ़ाइल में पेस्ट करें।

के बारे में Robots.txt Generator