Ελέγξτε τις αλλαγές πριν από τη δημοσίευση του robots.txt.
- Αυτό που κάνεις
- Διαχωρίζει τις ομάδες χρηστών-πρακτόρων και τους κανόνες Allow/Disallow.
- Αυτό που παίρνεις
- Δοκιμασμένος παράγοντας χρήστη
Οδηγός προϊόντος
Θήκες χρήσης
Δωρεάν προσομοιωτής robots.txt για Googlebot, GPTBot και άλλα προγράμματα ανίχνευσης, με διενέξεις, κανόνα νίκης και κανονικοποιημένο αρχείο.
Πρακτικό παράδειγμα
- 01
Ελέγξτε τις αλλαγές πριν από τη δημοσίευση του robots.txt.
- 02
Εξηγήστε γιατί επιτρέπεται ή μπλοκάρεται μια διαδρομή.
- 03
Εντοπίστε κανόνες εκτός ομάδας και βασικές αντιφάσεις.
Εξηγήστε γιατί επιτρέπεται ή μπλοκάρεται μια διαδρομή.
- Αυτό που κάνεις
- Επιλέξτε την πιο συγκεκριμένη ομάδα και εφαρμόστε την αντιστοίχιση της μεγαλύτερης διαδρομής.
- Αυτό που παίρνεις
- τοπική διαδρομή
Εντοπίστε κανόνες εκτός ομάδας και βασικές αντιφάσεις.
- Αυτό που κάνεις
- Εμφανίζει τον κανόνα νίκης, τις προειδοποιήσεις και ένα κανονικοποιημένο robots.txt με δυνατότητα λήψης.
- Αυτό που παίρνεις
- Κανόνας νίκης
Υπεύθυνη εμβέλεια
Πηγές και πεδίο εφαρμογής
Το robots.txt δεν είναι έλεγχος ταυτότητας, ασφάλεια ή εντολή αφαίρεσης ευρετηρίου. Ο προσομοιωτής υλοποιεί ένα πρακτικό υποσύνολο του RFC 9309 και δεν υποβάλλει ερώτημα σε απομακρυσμένες διευθύνσεις URL.