Générateur de robots.txt
Créez des règles de robot d'exploration avec des agents utilisateurs explicites, autorisez/interdisez les chemins et les URL de plan de site.
0 caractères
À vous de jouer
Ajoutez vos données, réglez les options et lancez l’outil.
—
Aucune donnée saisie enregistrée
Comment utiliser cet outil
01
Ajoutez vos données
Collez du texte ou choisissez un fichier. Essayez l’exemple pour commencer.
02
Choisissez vos options
Créez des règles de robot d'exploration avec des agents utilisateurs explicites, autorisez/interdisez les chemins et les URL de plan de site.
03
Vérifiez et exportez
Consultez les détails du traitement, puis copiez ou téléchargez le résultat. Poursuivez avec un autre outil si nécessaire.