مختبر robots.txt: الرابط ده مسموح لجوجل ولا ممنوع؟
الصق ملف robots.txt واكتب أي مسار، والأداة هتقولك الزاحف مسموح له ولا لأ وإيه القاعدة اللي حكمت. بتطبق قاعدة جوجل: أطول قاعدة مطابقة تكسب.
إزاي تستخدمها
- افتح موقعك/robots.txt وانسخ المحتوى كله والصقه في الخانة.
- اكتب المسار اللي عايز تختبره، زي /blog/ أو /cart.
- اختار الزاحف (Googlebot أو GPTBot مثلًا) واقرأ النتيجة والقاعدة اللي طبّقت.
الأداة شغالة في متصفحك بس، ومفيش حاجة بتتبعت لأي سيرفر.