چیک کریں کہ ہر بوٹ کون سے یو آر ایل کو کرال کر سکتا ہے، درست اصول معلوم کریں جو رسائی کا فیصلہ کرتا ہے، اور شائع کرنے سے پہلے ایک درست شدہ robots.txt ڈاؤن لوڈ کریں۔
Googlebot، GPTBot اور دیگر کرالر کے لیے مفت robots.txt سمیلیٹر، تنازعات، جیتنے والے اصول اور عام فائل کے ساتھ۔
01 · آپ کا ڈیٹا
مفروضے تبدیل کریں اور نتیجہ فوراً دیکھیں۔
02 · نتیجہ
منظر نامے کو نظر آنے والے ڈیٹا کے ساتھ دوبارہ شمار کیا گیا ہے۔ نتیجہ استعمال کرنے یا ڈاؤن لوڈ کرنے سے پہلے میٹرکس، تفصیل اور حدود کا جائزہ لیں۔
طریقہ
کب استعمال کریں
حدود
robots.txt توثیق، سیکورٹی، یا ڈی انڈیکسنگ کمانڈ نہیں ہے۔ سمیلیٹر RFC 9309 کے عملی ذیلی سیٹ کو نافذ کرتا ہے اور ریموٹ یو آر ایل سے استفسار نہیں کرتا ہے۔
ٹول براؤزر میں حساب اور فائلیں بناتا ہے، اکاؤنٹ یا Chapa Lab کو ڈیٹا بھیجے بغیر۔