إذا كان محرّك بحث Google محظورًا من الوصول إلى صفحتك بواسطة قاعدة robots.txt، لن تظهر الصفحة على الأرجح في نتائج بحث Google. في حال ظهرت، وهذا أمرٌ مستبعد، لن تتضمّن النتيجة وصفًا.
1. التأكّد من أنّ الصفحة محظورة باستخدام ملف robots.txt
إذا كنت قد أثبتّ ملكية موقعك الإلكتروني في Search Console، اتّبِع الخطوات التالية:
- افتح أداة "فحص عنوان URL".
- افحص عنوان URL الخاص بالصفحة في نتيجة بحث Google. احرص على اختيار الموقع الإلكتروني في Search Console الذي يحتوي على عنوان URL هذا.
- في نتائج الفحص، تحقَّق من حالة قسم فهرسة الصفحات. إذا ظهرت عبارة تم الحظر باستخدام robots.txt، هذا يعني أنّك أكّدت المشكلة ويمكنك الانتقال إلى القسم التالي لحلّها.
إذا لم تثبت ملكية موقعك الإلكتروني على Search Console، اتّبِع الخطوات التالية:
- ابحث عن أداة التحقّق من robots.txt.
- في أداة التحقّق، أدخِل عنوان URL الخاص بالصفحة التي لا تحتوي على الوصف. استخدِم عنوان URL الظاهر للصفحة في نتائج بحث Google.
- إذا أشارت أداة التحقّق إلى أنّ Google محظورٌ من الوصول إلى الصفحة، هذا يعني أنّك أكّدت المشكلة ويمكنك الانتقال إلى القسم التالي لحلّها.
2. إصلاح القاعدة
- استخدِم أداة التحقّق من robots.txt لمعرفة أي قاعدة تحظر صفحتك ومكان ملف robots.txt.
- أصلِح القاعدة أو أزِلها:
- إذا كنت تستخدم خدمة استضافة للمواقع الإلكترونية، أي إذا كان موقعك الإلكتروني مثلاً على Wix أو Joomla أو Drupal، لا يمكننا تقديم إرشادات دقيقة لك حول كيفية تعديل ملف robots.txt لأنّ كل خدمة استضافة لديها طريقة خاصة بها لإجراء ذلك. ابحث في مستندات المستضيف لمعرفة طريقة إزالة حظر Google من الوصول إلى صفحتك أو موقعك الإلكتروني. ومن عبارات البحث المقترَحة: "robots.txt provider_name" أو "إزالة حظر Google من الوصول إلى الصفحة provider_name". مثال على عبارة البحث: robots.txt Wix.
- إذا كان بإمكانك تعديل ملف robots.txt مباشرةً، أزِل القاعدة أو عدِّلها استنادًا إلى بنية robots.txt.