كيفية اكتشاف الصفحات غير القابلة للفهرسة وإصلاحها

إن كانت صفحة مهمة لا تظهر في Google، فالسبب غالباً واحد من عدد محدود من الأسباب القابلة للتشخيص. والمفتاح أن تفرّق بين أربع حالات: اكتُشفت، وزُحفت، وفُهرست، وتُعرض. يقدّم هذا الدليل ترتيباً تشخيصياً من الأسهل والأكثر شيوعاً إلى الأعمق، مع أداة فحص URL في Search Console كنقطة انطلاق — وينتهي بمتى يكون عدم فهرسة الصفحة قراراً صحيحاً.

ابدأ بأداة فحص URL

افتح أداة فحص URL (URL Inspection) في Search Console للصفحة المعنية. ستخبرك بحالتها: هل هي مفهرسة؟ ولماذا لا؟ وما الرابط الأساسي الذي اختاره Google؟ هذه هي نقطة الانطلاق الصحيحة بدل التخمين.

افهم الحالات الأربع

يمر Google بالصفحة عبر حالات: مُكتشَفة (يعرف الرابط ولم يزحف بعد)، ومزحوفة (قرأها)، ومفهرسة (خزّنها)، ومعروضة (مؤهلة للظهور). و«مُكتشَفة – غير مفهرسة حالياً» غالباً مسألة أولوية أو جودة؛ و«مزحوفة – غير مفهرسة حالياً» تعني أنه قرأها وقرر عدم فهرستها. تحديد الحالة يوجّه الإصلاح.

• مُكتشَفة – غير مفهرسة: أولوية/جودة أو بنية داخلية ضعيفة.
• مزحوفة – غير مفهرسة: جودة أو تكرار غالباً.
• مفهرسة: تظهر؛ فالمشكلة قد تكون في الترتيب لا الفهرسة.

أسباب الوصول: الحالة وrobots.txt وnoindex

الأسباب الأكثر شيوعاً وسهولةً أولاً: هل الصفحة تُعيد رمز 200 (لا 404 أو 5xx)؟ وهل هي محجوبة في robots.txt؟ وهل تحمل توجيه noindex (وسم meta أو ترويسة X-Robots-Tag)؟ فحجب robots.txt يمنع الزحف، وnoindex يمنع الفهرسة — تأكد أن أياً منهما ليس مطبّقاً بالخطأ على صفحة تريد فهرستها.

• رمز غير 200 (404/410/5xx): عالجه أولاً.
• محجوبة في robots.txt: أزل الحجب إن أردت الفهرسة.
• noindex غير مقصود: أزله من الصفحة.

أسباب الفهرسة: canonical وإعادة التوجيه وsoft 404

إذا كان الوصول سليماً، فانتقل لأسباب الفهرسة: هل يشير canonical لصفحة أخرى (فيفهرس Google تلك لا هذه)؟ وهل هناك سلسلة إعادة توجيه تربك الزحف؟ وهل الصفحة «soft 404» (تعيد 200 لكن محتواها يبدو كصفحة غير موجودة أو فارغة)؟ كل هذه تمنع فهرسة الصفحة المقصودة.

• canonical خاطئ يشير لصفحة أخرى.
• سلسلة إعادة توجيه طويلة أو حلقية.
• soft 404: محتوى فارغ أو «غير موجود» برمز 200.

أسباب الجودة والبنية: التكرار واليتم والمحتوى الرفيع

إن كان كل ما سبق سليماً، فالسبب غالباً في الجودة أو البنية: محتوى مكرر مع صفحة أخرى، أو صفحة يتيمة بلا روابط داخلية، أو ربط داخلي ضعيف، أو محتوى رفيع لا يضيف قيمة. قد يزحف Google الصفحة ثم يقرر أنها لا تستحق الفهرسة. والقيمة والتمايز والروابط الداخلية هي الحل هنا.

• تكرار مع صفحة أخرى: وحّد أو ميّز المحتوى.
• صفحة يتيمة/ربط داخلي ضعيف: اربطها من صفحات مهمة.
• محتوى رفيع: أضف قيمة حقيقية أو ادمج.

أسباب أخرى: JavaScript، وجدران الدخول، وتعارض الخريطة

أسباب أقل شيوعاً: محتوى مهم لا يظهر إلا بعد تنفيذ JavaScript ثقيل قد لا يُصيَّر جيداً؛ أو صفحة خلف تسجيل دخول أو جدار كوكيز لا يراها Googlebot؛ أو تعارض بين خريطة الموقع والروابط الفعلية. تحقّق أن المحتوى المهم يظهر في HTML المُصيَّر وأن الصفحة متاحة دون تسجيل.

• محتوى معتمد كلياً على JS لا يُصيَّر: أتِح المحتوى الأساسي في HTML.
• جدار دخول/كوكيز: أتِح الصفحة العامة للزاحف.
• تعارض الخريطة مع الروابط الفعلية: وحّدها.

صفحة جديدة؟ امنحها وقتاً

الصفحات المنشورة حديثاً قد تحتاج وقتاً لتُكتشف وتُفهرَس، خصوصاً لموقع جديد أو ضعيف الروابط الداخلية. فإن كانت الصفحة سليمة تقنياً وذات قيمة، فالصبر وتقوية الروابط الداخلية أفضل من طلب الفهرسة المتكرر الذي لا يفيد.

متى يكون عدم الفهرسة صحيحاً؟

ليست كل صفحة يجب أن تُفهرَس. فصفحات الشكر، ونتائج البحث الداخلي، والفلاتر اللانهائية، والنسخ المكررة، وصفحات الإدارة — من الأفضل ألا تُفهرَس (بـnoindex أو canonical مناسب). ركّز فهرستك على الصفحات التي تريد فعلاً أن يجدها الباحث.

أخطاء شائعة

• طلب الفهرسة مراراً بدل إصلاح السبب الجذري.
• الخلط بين حالة «مزحوفة – غير مفهرسة» ومشكلة زحف.
• افتراض أن كل صفحة يجب أن تُفهرَس.
• تجاهل canonical الذي يشير لصفحة أخرى.
• توقّع فهرسة مضمونة بعد الإصلاح مباشرة.

ماذا تفعل الآن؟

• افحص الصفحة بأداة URL Inspection وحدد حالتها.
• تحقق بالترتيب: الحالة (200؟)، ثم robots.txt، ثم noindex.
• ثم canonical، وإعادة التوجيه، وsoft 404.
• ثم الجودة والبنية: تكرار، أو يتم، أو محتوى رفيع.
• أصلح السبب، واطلب الفهرسة مرة، ثم راقب في Search Console.

أسئلة شائعة

أصلحت المشكلة، متى تُفهرَس الصفحة؟

لا يوجد ضمان أو موعد. يعيد Google الزحف ويقرر حسب الجودة والقابلية. أصلح السبب الجذري وامنح وقتاً، وراقب في Search Console.

هل أطلب الفهرسة عدة مرات لتسريعها؟

لا. طلب الفهرسة المتكرر لا يسرّع شيئاً. اطلبها مرة بعد الإصلاح ثم راقب.

«مزحوفة – غير مفهرسة»، ماذا تعني؟

أن Google قرأ الصفحة وقرر عدم فهرستها، غالباً لأسباب جودة أو تكرار. حسّن القيمة والتمايز والروابط الداخلية.

هل يجب فهرسة كل صفحة؟

لا. صفحات مثل الشكر ونتائج البحث الداخلي والفلاتر يُفضّل ألا تُفهرَس. ركّز على الصفحات التي تريد أن يجدها الباحث.