الصفحة محظورة من الفهرسة

لا يمكن لمحرّكات البحث عرض الصفحات في نتائج البحث إلا إذا لم تعرض هذه الصفحات حظر الفهرسة صراحةً بواسطة برامج زحف محركات البحث. بعض عناوين HTTP تُعلم هذه العلامات برامج الزحف بأنّه يجب عدم فهرسة صفحة.

يجب حظر فهرسة المحتوى الذي لا تريده أن يظهر في نتائج البحث فقط.

أسباب تعذُّر التدقيق في فهرسة Lighthouse

تُعلم Lighthouse صفحاتها التي لا تستطيع محركات البحث فهرستها:

تدقيق باستخدام أداة Lighthouse يُظهر أنّه يتعذّر على محرّكات البحث فهرسة صفحتك

تتحقّق أداة Lighthouse فقط من العناوين أو العناصر التي تحظر جميع محرّكات البحث برامج الزحف. على سبيل المثال، يمنع العنصر <meta> أدناه جميع محركات البحث برامج الزحف (المعروفة أيضًا باسم برامج الروبوت) للوصول إلى صفحتك:

<meta name="robots" content="noindex"/>

يحظر عنوان استجابة HTTP هذا أيضًا جميع برامج الزحف:

X-Robots-Tag: noindex

قد تكون لديك أيضًا عناصر <meta> تحظر برامج زحف معيّنة، مثل:

<meta name="Googlebot" content="noindex"/>

لا تجتاز أداة Lighthouse في عمليات التدقيق للتوجيهات الخاصة بالزاحف مثل هذه، ولكن يمكن أن لا تزال تجعل من الصعب اكتشاف صفحتك، لذا يُرجى استخدامها بحذر. ستصدر المنارة إذا كان هناك توجيه خاص بالزاحف يحظر برنامج تتبُّع شائع للفهرسة.

كيفية التأكّد من أنّ محرّكات البحث يمكنها الزحف إلى صفحتك

تأكَّد أولاً من أنّك تريد أن تفهرس محركات البحث الصفحة. تتضمن بعض الصفحات، مثل خرائط موقع أو المحتوى القانوني، يجب ألّا تتم فهرسته بشكل عام. (ضع في اعتبارك أن حظر ولا تمنع الفهرسة المستخدمين من الدخول إلى الصفحة إذا كانوا يعرفون عنوان URL لها.)

بالنسبة إلى الصفحات التي تريد فهرستها، أزِل أي عناوين HTTP أو عناصر <meta>. التي تحظر زواحف محركات البحث استنادًا إلى كيفية إعداد موقعك الإلكتروني قد تحتاج إلى تنفيذ بعض أو كلّ الخطوات أدناه:

  • أزِل عنوان استجابة HTTP X-Robots-Tag في حال إعداد بروتوكول HTTP. عنوان الاستجابة:
X-Robots-Tag: noindex
  • أزِل العلامة الوصفية التالية إذا كانت موجودة في رأس الصفحة:
<meta name="robots" content="noindex">
  • تجنَّب استخدام العلامات الوصفية التي تحظر برامج زحف معيّنة في حال وجود هذه العلامات في ملف عنوان الصفحة. على سبيل المثال:
<meta name="Googlebot" content="noindex">

إضافة عنصر تحكّم إضافي (اختياري)

قد تحتاج إلى المزيد من التحكّم في طريقة فهرسة محركات البحث لصفحتك. على سبيل المثال: فأنت لا تريد أن يفهرس Google الصور، ولكنك تريد باقي الصفحة المفهرسة.

للحصول على معلومات حول طريقة ضبط عناصر <meta> وHTTP لمحركات بحث محددة، يمكنك الاطلاع على هذه الأدلة:

الموارد