«Discovered - currently not indexed»: لماذا لا تزحف جوجل لصفحاتك؟
باختصار: حالة «Discovered - currently not indexed» في تقرير فهرسة الصفحات تعني أن جوجل وجدت رابط الصفحة لكنها لم تزحف إليها بعد. وتشرح صفحة مساعدة Search Console أن جوجل غالباً أرادت الزحف، لكنها توقعت أن ذلك سيثقل الموقع، فأجّلت الزحف، ولهذا يكون تاريخ آخر زحف فارغاً. الحل ليس الضغط على «طلب الفهرسة» لكل رابط، بل تسريع استجابة الخادم، وتقليل الروابط قليلة القيمة التي تستهلك وقت الزحف، وتقوية الروابط الداخلية للصفحات المهمة.
ما الذي تعنيه الحالة بالضبط؟
صاحب متجر قطع غيار سيارات في عمّان أضاف ألفي منتج جديد دفعة واحدة، وأرسل خريطة الموقع. بعد أسابيع يفتح Search Console فيجد معظم المنتجات الجديدة تحت «Discovered - currently not indexed». يظن أن جوجل رفضتها لأنها ضعيفة.
لكن الحالة لا تقول ذلك. هي تقول إن جوجل تعرف أن الرابط موجود، من خريطة الموقع أو من رابط داخلي، لكنها لم تزره بعد. لم تقرأ الصفحة أصلاً، فلم تحكم على جودتها. وهذا يفرقها عن حالة «Crawled - currently not indexed» التي تعني أن جوجل زحفت إلى الصفحة وقررت عدم فهرستها حتى الآن.
لماذا تؤجل جوجل الزحف؟
يشرح دليل جوجل عن إدارة ميزانية الزحف أن ميزانية زحف الموقع تتحدد بعاملين: حد قدرة الزحف، والطلب على الزحف. حد القدرة موجود لأن جوجل لا تريد أن تثقل خادمك. ويذكر الدليل أن كل موقع يبدأ بحد افتراضي متحفظ، وأن الحد يرتفع تلقائياً مع الوقت إذا كان هناك طلب على الزحف وبقي الموقع سليماً.
ويوضح الدليل أن الحد يرتفع إذا كان الموقع يستجيب باستمرار وكانت أوقات الاستجابة مستقرة أو تتحسن، وأنه ينخفض إذا تباطأ الموقع أو أعاد أخطاء خادم من فئة 5xx أو إشارات تحديد معدل. لذلك موقع على استضافة مشتركة بطيئة، يرد على كل طلب في ثوانٍ، سيجعل جوجل تزحف ببطء، وتتراكم الروابط المكتشفة غير المزحوف إليها.
ويذكر الدليل أن من الفئات التي يخاطبها المواقع التي يُصنف جزء كبير من روابطها في Search Console على أنه Discovered - currently not indexed. أي أن هذه الحالة بكثرة إشارة إلى مشكلة في الزحف تستحق المعالجة.
الخطوة الأولى: سرعة استجابة الخادم
ابدأ بالخادم لا بالمحتوى:
- قِس زمن استجابة الصفحات من الخادم، خاصة صفحات المنتجات والأقسام، لا الصفحة الرئيسية وحدها.
- افتح تقرير إحصاءات الزحف في Search Console، ولاحظ متوسط زمن الاستجابة وهل تظهر أخطاء خادم.
- إذا كانت الاستضافة لا تتحمل، فالترقية أو التخزين المؤقت للصفحات العامة قد يكون أهم إجراء لفهرسة منتجاتك.
- تأكد أن أدوات الحماية في الاستضافة أو شبكة التوزيع لا تبطئ أو تحظر زاحف جوجل عن طريق الخطأ.
الخطوة الثانية: قلّل الروابط التي لا تستحق الزحف
المتاجر تولد روابط كثيرة دون أن يقصد أحد: كل فلتر بالسعر واللون والمقاس والماركة ينتج رابطاً جديداً، وكل ترتيب للنتائج رابط آخر، وصفحات البحث الداخلي روابط أخرى. إذا اكتشفت جوجل عشرات آلاف هذه الروابط، فستوزع وقت الزحف المحدود عليها، وتتأخر صفحات المنتجات الحقيقية.
يذكر دليل ميزانية الزحف مثلاً أن صفحات soft 404 تستمر في الزحف وتهدر الميزانية، وينصح بمعالجتها. والمبدأ نفسه ينطبق على أي صفحات منخفضة القيمة: لا تجعلها تتنافس مع صفحاتك المهمة. راجع كيف يولد موقعك روابط الفلاتر، واجعل روابط الترتيب والفلاتر الثانوية لا تُكتشف كروابط عادية حيث أمكن.
الخطوة الثالثة: خريطة موقع نظيفة
ينصح الدليل بإبقاء خرائط الموقع محدثة، لأن جوجل تقرؤها بانتظام. اجعل خريطة الموقع تحتوي الروابط التي تريد فهرستها فقط: منتجات متاحة، وأقسام حقيقية، ومقالات. لا تضع فيها روابط فلاتر، ولا منتجات محذوفة، ولا روابط تعيد توجيهاً. وحدّث تاريخ التعديل فقط عندما يتغير المحتوى فعلاً.
الخطوة الرابعة: روابط داخلية للصفحات المهمة
صفحة منتج لا يصل إليها رابط إلا من خريطة الموقع ستُعامل كأقل أهمية من صفحة مرتبطة من القسم والرئيسية ومن منتجات مشابهة. تأكد أن كل منتج جديد يظهر في صفحة قسمه دون أن يدفن في الصفحة العشرين من الترقيم، وأن الأقسام الأهم مرتبطة من القائمة الرئيسية.
الموقع الجديد يبدأ ببطء
إن كان متجرك جديداً أو نقلته إلى نطاق جديد، فتذكر ما يقوله دليل جوجل: كل موقع يبدأ بحد زحف افتراضي متحفظ، ويرتفع الحد مع الوقت إذا وُجد طلب وبقي الموقع سليماً. لذلك لا تتوقع أن تُزحف آلاف المنتجات في أيامها الأولى. الأفضل أن تبدأ بالأقسام والمنتجات الأكثر طلباً، وأن تجعلها في أعلى خريطة الموقع وفي الروابط الداخلية، ثم تتوسع.
لا تهدر الزحف على التحويلات والروابط المعطلة
كل رابط داخلي يشير إلى صفحة محولة أو محذوفة يكلف زيارة لا تضيف شيئاً. إن غيرت روابط منتجاتك، فحدّث الروابط الداخلية لتشير إلى الروابط الجديدة مباشرة، بدل الاعتماد على التحويل. وإن حذفت منتجات، فأزل روابطها من القوائم وخريطة الموقع. ونظف روابط الوسوم والصفحات المكررة التي يولدها القالب دون أن يحتاجها أحد. كل زيارة يوفرها جوجل هنا يمكن أن تذهب لصفحة منتج لم تُزر بعد.
ماذا عن «طلب الفهرسة»؟
أداة فحص الرابط تسمح بطلب فهرسة صفحة واحدة، وهي مفيدة لصفحة مهمة جديدة أو معدلة. لكنها ليست حلاً لآلاف الروابط. إذا كانت المشكلة في قدرة الخادم أو في كثرة الروابط منخفضة القيمة، فلن يغير الطلب اليدوي شيئاً يذكر.
متى تقلق ومتى تنتظر؟
بعض الروابط في هذه الحالة أمر طبيعي، خاصة بعد إضافة محتوى كثير مرة واحدة. راقب الاتجاه: هل العدد يتناقص مع الوقت بعد تحسين الخادم وتنظيف الروابط؟ إن كان يتناقص، فأنت على الطريق الصحيح. وإن كان يزيد مع كل إضافة، فالمشكلة مستمرة في البنية.
مثال توضيحي: متجر قطع غيار وألفا منتج جديد
لنفترض المتجر المذكور فحص إحصاءات الزحف فوجد زمن استجابة مرتفعاً وأخطاء خادم متفرقة. فعّل التخزين المؤقت للصفحات العامة، ونظّف خريطة الموقع من روابط الفلاتر والمنتجات المحذوفة، وجعل المنتجات الجديدة تظهر في أول صفحة من أقسامها. ثم راقب عدد الروابط في الحالة أسبوعياً.
هذا مثال توضيحي لطريقة المعالجة، دون أرقام أو نتائج مقاسة.
أسئلة شائعة
شو يعني Discovered - currently not indexed؟
يعني أن جوجل وجدت الرابط ولم تزحف إليه بعد، وغالباً أجلت الزحف حتى لا تثقل الموقع.
هل جوجل رفضت صفحاتي لأنها ضعيفة؟
لا. في هذه الحالة لم تقرأ جوجل الصفحة أصلاً، فلم تحكم على محتواها.
أطلب فهرسة لكل الروابط؟
لا. الطلب اليدوي لصفحات قليلة مهمة. لعدد كبير عالج سرعة الخادم والروابط منخفضة القيمة.
الاستضافة البطيئة ممكن تكون السبب؟
نعم. يذكر دليل جوجل أن الحد ينخفض إذا تباطأ الموقع أو أعاد أخطاء خادم.
إذا كانت منتجاتك الجديدة عالقة في Discovered - currently not indexed، راسلنا ونحلل الزحف والخادم معك.