Robots.txt Generator

Robots.txt Generator

Par défaut - Tous les robots sont:	Permis Refusé
Délai d'exploration:	Par défaut - Aucun délai 5 Seconds 10 Seconds 20 Seconds 60 seconds 120 Seconds
Plan du site: (laisser vide si vous n'en avez pas)
Robots de recherche:	Google	Identique à la valeur par défaut Permis Refusé
	Google Image	Identique à la valeur par défaut Permis Refusé
	Google Mobile	Identique à la valeur par défaut Permis Refusé
	MSN Search	Identique à la valeur par défaut Permis Refusé
	Yahoo	Identique à la valeur par défaut Permis Refusé
	Yahoo MM	Identique à la valeur par défaut Permis Refusé
	Yahoo Blogs	Identique à la valeur par défaut Permis Refusé
	Ask/Teoma	Identique à la valeur par défaut Permis Refusé
	GigaBlast	Identique à la valeur par défaut Permis Refusé
	DMOZ Checker	Identique à la valeur par défaut Permis Refusé
	Nutch	Identique à la valeur par défaut Permis Refusé
	Alexa/Wayback	Identique à la valeur par défaut Permis Refusé
	Baidu	Identique à la valeur par défaut Permis Refusé
	Naver	Identique à la valeur par défaut Permis Refusé
	MSN PicSearch	Identique à la valeur par défaut Permis Refusé
Répertoires restreints:	Le chemin est relatif à la racine et doit contenir une barre oblique à la fin "/"

Maintenant, créez le fichier 'robots.txt' dans votre répertoire racine. Copiez le texte ci-dessus et collez-le dans le fichier texte.

Apropos Robots.txt Generator

Créer un fichier Robots.txt est désormais facile avec l'aide de Robots.txt Generator. 

Comment utiliser Robots.txt Generator ? 

Pour créer des fichiers Robots.txt à l'aide de Robots.txt Generator :

1. Déterminez si vous autorisez ou refusez Default - All Robots.
2. Choisissez le délai d'attente
3. Sitemap : (laissez vide si vous n'en avez pas) 
4. Déterminez les Robots de recherche souhaités
5. Déterminez les répertoires restreints
6. Cliquez sur Robots.text ou sur Créer et enregistrer sous Robots.text.