Sprawdź zmiany przed opublikowaniem pliku robots.txt.
- Co robisz
- Oddziela grupy agentów użytkownika i reguły Zezwalaj/Zabraniaj.
- Co otrzymujesz
- Przetestowano agenta użytkownika
Przewodnik po produkcie
Zastosowania
Darmowy symulator pliku robots.txt dla Googlebota, GPTBota i innych robotów, z konfliktami, regułą wygrywającą i znormalizowanym plikiem.
Praktyczny przykład
- 01
Sprawdź zmiany przed opublikowaniem pliku robots.txt.
- 02
Wyjaśnij, dlaczego dana trasa jest dozwolona lub zablokowana.
- 03
Wykrywaj reguły spoza grupy i podstawowe sprzeczności.
Wyjaśnij, dlaczego dana trasa jest dozwolona lub zablokowana.
- Co robisz
- Wybierz najbardziej konkretną grupę i zastosuj dopasowanie najdłuższej ścieżki.
- Co otrzymujesz
- trasa lokalna
Wykrywaj reguły spoza grupy i podstawowe sprzeczności.
- Co robisz
- Wyświetla zwycięską regułę, ostrzeżenia i znormalizowany plik robots.txt do pobrania.
- Co otrzymujesz
- Zwycięska zasada
Odpowiedzialny zakres
Źródła i zakres
plik robots.txt nie jest poleceniem uwierzytelniania, zabezpieczeń ani deindeksowania. Symulator implementuje praktyczny podzbiór RFC 9309 i nie wysyła zapytań do zdalnych adresów URL.