Générateur robots.txt
Générez des règles robots.txt avec agent utilisateur, chemins autorisés ou interdits et URL de sitemap.
Espace de travail
—
Comment utiliser cet outil
Saisissez un chemin par ligne et éventuellement l’URL absolue du sitemap, puis téléchargez robots.txt.
À savoir
robots.txt contrôle l’exploration, pas les accès ni l’indexation de façon garantie. Protégez le contenu privé par une authentification.
Questions fréquentes
Comment utiliser Générateur robots.txt ?
Saisissez un chemin par ligne et éventuellement l’URL absolue du sitemap, puis téléchargez robots.txt.
Que vérifier avant d’utiliser le résultat ?
robots.txt contrôle l’exploration, pas les accès ni l’indexation de façon garantie. Protégez le contenu privé par une authentification.
Faut-il un compte ?
Non. Cet outil est gratuit et le traitement a lieu dans votre navigateur.