يواجه العديد من مطوري الويب وأصحاب الأعمال مشكلة اختفاء صفحات موقعهم من نتائج بحث جوجل، أو ظهور رسائل تحذيرية محبطة في أداة مشرفي المواقع Google Search Console (GSC) تفيد بأن صفحات هامة تم استبعادها من الفهرسة. إن فهم الفارق التقني بين عمليات الزحف (Crawling) وعمليات الفهرسة (Indexing) وكيفية تفسير تقارير GSC هو المفتاح الأساسي لاستعادة حضورك الرقمي. في هذا الدليل، نحلل أشهر أسباب استبعاد الصفحات وخطوات إصلاحها برمجياً خطوة بخطوة.
1. الفرق بين “تم الزحف – لم تتم الفهرسة” و “تم اكتشاف الصفحة – لم تتم الفهرسة”
يُعد هذان الخطآن من أكثر الحالات شيوعاً في تقرير “الصفحات” في كونسول جوجل، ولكل منهما دلالة تقنية وتشخيص مختلف تماماً:
| الحالة في GSC | التشخيص التقني والسببي | الحل والإجراء البرمجي المطلوب |
|---|---|---|
| Discovered – currently not indexed (تم اكتشاف الصفحة – لم تتم الفهرسة حتى الآن) |
عثر روبوت جوجل على الرابط من خلال خريطة الموقع أو رابط داخلي، لكنه لم يقم بالزحف إليها بعد بسبب قيود ميزانية الزحف (Crawl Budget) أو بطء استجابة الخادم. | تحسين زمن استجابة الخادم TTFB، مراجعة سرعة الاستضافة، وتقليل عدد الصفحات غير الضرورية التي تستهلك زحف البوت. |
| Crawled – currently not indexed (تمت الفهرسة للزحف – لم تتم الفهرسة) |
زار روبوت جوجل الصفحة وقرأ محتواها كاملاً، لكن خوارزميات الجودة قررت عدم إدراجها في الفهرس بسبب ضعف جودة المحتوى، المحتوى المكرر، أو ضعف القيمة المضافة. | إعادة صياغة المحتوى وإثراؤه، إضافة بيانات فريدة وأدلة واضحة، وضمان عدم تكراره مع صفحات أخرى في الموقع. |
2. أخطاء وسوم العنوان الأساسي Canonical Tag والتوجيه
من الأسباب الشائعة لعدم الفهرسة وجود تعارض في وسم الرابط الأساسي (Canonical Tag):
- صفحة بديلة تتضمن علامة أساسية مناسبة (Duplicate without user-selected canonical): رأت جوجل أن الصفحة مكررة واختارت رابطاً آخر كصفحة رئيسية. الحل: ضع صراحة وسم
<link rel="canonical" href="https://example.com/page" />على الصفحة الأصلية. - صفحة مستبعدة بسبب وسم noindex: تأكد من فحص كود
<meta name="robots" content="noindex">أو ترويسات HTTP Response Headers، وتأكد من عدم وجوده في صفحاتك العامة بعد الانتقال من بيئة التطوير إلى بيئة الإنتاج. - سلاسل إعادة التوجيه (Redirect Chains): توجيه الرابط من HTTP إلى HTTPS، ثم من non-www إلى www، ثم من مسار بلاحقة إلى مسار بدون لاحقة، يرهق روبوت الزحف ويؤدي إلى استبعاد الصفحة.
3. خطوات عملية لإرسال الصفحات وتحديث خريطة الموقع XML
لتسريع عملية فهرسة وتحديث صفحات موقعك بعد معالجة الأخطاء، اتبع هذا التسلسل:
- فحص الرابط عبر أداة فحص العناوين (URL Inspection): أدخل الرابط واضغط على “اختبار عنوان URL المنشور” (Test Live URL) للتأكد من قدرة جوجل على تحميل كود HTML والأصول دون حجب.
- طلب الفهرسة (Request Indexing): اضغط على طلب الفهرسة لإدراج الرابط في قائمة الانتظار ذات الأولوية.
- تحديث ملف sitemap.xml: تأكد من أن خريطة الموقع تتضمن فقط الروابط ذات كود الحالة 200 OK وتستثني روابط التحويلات والصفحات المحجوبة بملف robots.txt.
- إرسال التحقق من الإصلاح في GSC: بعد حل الخطأ التقني لعدة صفحات، انقر على زر “التحقق من صحة الإصلاح” (Validate Fix) في تقرير المشكلة لتبدأ جوجل عملية إعادة الزحف التلقائي.
فحص المشاكل التقنية واستعادة الأرشفة
تتطلب مشكلات الزحف المتقدمة تدقيقاً شاملاً لهندسة الروابط الداخلية وملفات الخادم. يقدم فريق الخواطر الجزيرة للحلول الرقمية خدمات احترافية في استشارات السيو التقني وإدارة كونسول جوجل لضمان أرشفة كامل صفحات موقعك وبقائها في صدارة محركات البحث دون انقطاع.