grathuit

Utilisez cet outil pour générer un simple robots.txt fichier pour votre site web. Ce fichier vous permet de cacher des fichiers ou répertoires que vous ne souhaitez pas les spiders des moteurs de recherche pour trouver. Cet outil générateur est conçu pour créer le texte pour le fichier pour vous, vous pouvez alors faire des changements après si vous le considérez nécessaire.

Générer un fichier robot avec cet outil est idéal si vous désirez bloquer certains répertoires ou fichiers à partir de moteurs de recherche.

Pour utiliser l'outil générateur, entrez les informations requises ci-dessous et cliquez sur le bouton. Vous serez alors montré le texte pour le fichier. Copiez ce dans un fichier appelé robots.txt et le placer sur la racine de votre site (dans le même endroit que votre page d'accueil).

Imposer des restrictions
Vous pouvez imposer des restrictions sur les pages web de refuser l'indexation. Par défaut, la plupart des utilisateurs voudront permettre à tous les répertoires, sauf leur / cgi-bin / répertoire, qui contient souvent des scripts, et leur répertoire images / images /. Pour permettre à toutes les pages Web, sélectionnez Oui pour "Activer toutes les pages Web", puis saisissez chaque page Web ou le chemin du répertoire dans la zone d'exclusion, un par ligne.

Exemple: "http://www.yourdomain.com/cgi-bin/» (Exclut le répertoire / cgi-bin / répertoire)
Exemple: "http://www.yourdomain.com/images/» (Exclut les images / / répertoire)
Exemple: "http://www.yourdomain.com/welcome.html" (à l'exclusion de la / welcome.html page web)