مولد ملف robots.txt
أنشئ قواعد السماح والحظر وخريطة الموقع لملف robots.txt بسهولة.
مسار واحد لكل سطر، يبدأ بـ /. استخدم %20 للمسافات و%23 للرمز #.
robots.txt ينظم الزحف، ولا يحمي الصفحات الخاصة ولا يضمن إزالتها من نتائج البحث. Google يتجاهل Crawl-delay. ضع رمز وكيل واحد في كل سطر (حروف أو _ أو - أو *).
robots.txtراجع الملف قبل نشره في جذر الموقع. التعديلات اليدوية تُحفظ عند النسخ والتنزيل؛ تغيير حقول النموذج يعيد إنشاء الملف.