Vérifiez quelles URL chaque robot peut explorer, découvrez la règle exacte qui décide de l'accès et téléchargez un fichier robots.txt corrigé avant de le publier.
Méthode
Sépare les groupes d'agents utilisateurs et les règles d'autorisation/interdiction.
Sélectionnez le groupe le plus spécifique et appliquez la correspondance de chemin la plus longue.
Affiche la règle gagnante, les avertissements et un fichier robots.txt normalisé téléchargeable.
Vos données
Modifiez les hypothèses et vérifiez immédiatement le résultat.
Résultat
Le scénario a été recalculé avec les données visibles. Examinez les mesures, les détails et les limites avant d’utiliser ou de télécharger le résultat.
Portée responsable
robots.txt n'est pas une commande d'authentification, de sécurité ou de désindexation. Le simulateur implémente un sous-ensemble pratique de la RFC 9309 et n'interroge pas les URL distantes.