هل تساءلت يوماً كيف تعرف محركات البحث أي الصفحات يجب أن تظهر في النتائج وأيها يجب تجاهله؟ السر يكمن في ملف صغير الحجم لكنه عظيم الأثر يُسمى Robots.txt. سنشرح لك في هذا المقال كيفية إعداده باحترافية لمدونتك.
ما هو ملف Robots.txt؟
ملف Robots.txt هو ملف نصي بسيط يتواجد في الجذر الرئيسي لموقعك. وظيفته الأساسية هي إعطاء تعليمات لـ "عناكب" أو "بوتات" محركات البحث حول الأقسام التي يُسمح لها بالدخول إليها وفهرستها، والأقسام المحظورة عليها.
لماذا يحتاج مدونو "بلوجر" لهذا الملف؟
شرح أهم الأوامر في ملف Robots.txt
| الأمر | الوظيفة |
|---|---|
| User-agent | يحدد نوع الروبوت المستهدف (مثل Googlebot). |
| Disallow | يخبر الروبوت بالأقسام التي لا يسمح له بزيارتها. |
| Allow | يخبر الروبوت بالأقسام المسموح بزيارتها. |
| Sitemap | رابط يحتوي على قائمة بجميع مقالاتك لتسهيل أرشفتها. |
كيف تضيف الملف إلى مدونتك في بلوجر؟
بعد الحصول على الكود من الأداة أعلاه، اتبع هذه الخطوات البسيطة:
- سجل الدخول إلى لوحة تحكم Blogger.
- انتقل إلى الإعدادات (Settings) من القائمة الجانبية.
- انزل للأسفل حتى تصل إلى قسم برامج الزحف والفهرسة.
- فعل خيار تفعيل ملف robots.txt مخصص.
- اضغط على ملف robots.txt مخصص ثم الصق الكود الذي نسخته واحفظ التغييرات.
الخاتمة
إعداد ملف Robots.txt بشكل صحيح هو الخطوة الأولى نحو سيو احترافي. باستخدام أداتنا، ضمنت أن محركات البحث ستفهم هيكلية مدونتك بوضوح وتتجاهل الروابط غير الضرورية.
هل واجهت مشكلة في أرشفة مقالاتك؟ اترك لنا تعليقاً برابط مدونتك وسنساعدك في فحص ملفك مجاناً!



