كيف يعمل
تقوم الأداة بإنشاء الصيغة: 'User-agent' يحدد البوت، و 'Disallow' يحدد المسار المحظور. تضمن الأداة التنسيق الصحيح لتجنب الأخطاء.
What is مولد ملف Robots.txt?
ملف robots.txt هو ملف نصي يخبر محركات البحث بالصفحات المسموح والممنوع زيارتها. يعد أداة أساسية لتحسين السيو التقني وإدارة موارد الخادم.
دليل خطوة بخطوة
- الوكيل – استخدم '*' للكل أو حدد بوت.
- القواعد – أدخل المسارات المحظورة.
- الخريطة – أضف رابط Sitemap.
- توليد – انسخ النص الناتج.
Example
Input: حظر /admin/
Result: User-agent: * Disallow: /admin/
أسئلة مكررة
ماذا يعني Disallow: /؟
حظر الموقع بالكامل عن محركات البحث.
هل هو حساس للأحرف؟
نعم، الأحرف الكبيرة والصغيرة تختلف.
كيف أسمح بكل شيء؟
اترك Disallow فارغاً.
هل يحمي الملفات؟
لا، هو توجيه عام وليس حماية أمنية.
أين أضع الملف؟
في المجلد الرئيسي للموقع (Root).
خاتمة
خطأ واحد في هذا الملف قد يخفي موقعك تماماً من جوجل. استخدم المولد لضمان الدقة، لكن تذكر أنه لا يمنع الأرشفة بشكل نهائي إذا كانت هناك روابط خارجية تشير للصفحة.