Confidentiel : rien ne quitte votre navigateur. Sans inscription.
Générateur de robots.txt
Créez un robots.txt valide avec règles pour robots et lien sitemap. Gratuit, sans inscription.
Ce que fait l'outil
Ajoutez un bloc de règles à la fois : choisissez un user agent (ou * pour tous les robots), listez les chemins à interdire et autoriser, définissez éventuellement un délai d'exploration, puis ajoutez l'URL de votre sitemap. L'outil assemble un robots.txt correctement formaté à copier et envoyer à la racine de votre site.
Configuration courante
Interdire /admin/ et /private/ à tous les agents tout en pointant les robots vers votre sitemap est la configuration de départ standard de la plupart des sites.
Confidentiel par conception
Tout s'exécute dans votre navigateur. Rien ne quitte votre appareil.
Estimation indicative. Les résultats reposent sur les tarifs publics indiqués et peuvent différer de votre facture réelle. Conditions
Questions fréquentes
Qu'est-ce que robots.txt ?
Un fichier texte à la racine de votre site (exemple.com/robots.txt) qui indique aux robots des moteurs de recherche quelles pages ils peuvent visiter ou non.
Robots.txt garde-t-il les pages privées ?
Non. C'est une demande, pas une contrainte : les robots bien élevés l'obéissent, mais cela ne bloque pas les visiteurs déterminés. Utilisez l'authentification pour une vraie confidentialité.
Mes données sont-elles envoyées à un serveur ?
Non. La génération se fait entièrement dans votre navigateur.