السلام عليكم ومرحبا بالجميع
اقدم لكم ملف مهم و ضروري يحتاجه اي موقع او منتدى لتسريع الارشفة و توجيه العناكب بالطريقة السليمة
الملف هو robots.txt
هذا الملف يتم وضعه في جذر او مسار الموقع و ليس في المجلد كما يقوم به بعض الاشخاص
مثال: https://www.soft4sat.com/robots.txt
ودور الملف هو منع محركات البحث من ارشفة المجلدات و الملفات الغير ضرورية و التي تثقل العناكب في ارشفة الموقع
و ذلك بدل من ان تارشف المواضيع تجدها تارشف صفحات غير مهمة وهذا يؤدي الى ضعف الارشفة وضعف مواضيع الموقع.
و لكن بفضل هذا الملف المرفق سوف يتم توجيه محركات البحث الى الاشياء المهمة في موقعك فقط.
ملاحظة: لا تنسى ان تغير اسم رابط موقعك او منتداك في رابط الخريطة داخل الملف
مثال باللون الاحمر
Sitemap: https://www.yourdomain.com/vb/sitemap_index.xml.gz