Crawled – currently not indexed: ماذا تعني وكيف تصلحها
زار Google عنوان URL لديك وقرأه ثم أبقاه خارج نتائج البحث. إليك كيف تميّز الصفحات التي تستحق فرصة ثانية، وما يقوله Google لإعادتها إلى الفهرس.
تعني حالة Crawled – currently not indexed (تم الزحف إليها - غير مفهرسة حاليًا) أن Googlebot جلب صفحتك وقرر عدم إضافتها إلى فهرس Google، لذلك لا يمكن أن تظهر في البحث. وتشرح مساعدة تقرير فهرسة الصفحات ذلك هكذا: تم الزحف إلى الصفحة لكنها لم تُفهرس، و«قد تتم فهرستها في المستقبل أو لا تتم».
السبب عادةً هو الصفحة نفسها، لا عائق تقني. ستتعرف أدناه على كيفية أن تقرر، عنوانًا بعنوان، ما إذا كنت ستُصلح كل صفحة أو تضيف إليها noindex أو تحذفها، وكم يستغرق الإصلاح بحسب Google. هل التقرير جديد عليك؟ ابدأ بهذا الدليل إلى Google Search Console.
ماذا تعني حالة "Crawled – currently not indexed"؟
تعني الحالة أن Google زحف إلى الصفحة واختار عدم فهرستها. لم يمنع شيء Googlebot: قرر Google أن يبقي الصفحة خارج الفهرس في الوقت الحالي. هناك فرقان يساعدانك على قراءة الحالة بشكل صحيح.
الزحف مقابل الفهرسة
الزحف هو تنزيل Googlebot للصفحة. أما الفهرسة فهي تخزين Google لها حتى تظهر في عمليات البحث. قد يُزحف إلى الصفحة مرات عديدة ولا تُفهرس أبدًا.
تقول مساعدة أداة فحص عنوان URL إن جودة الصفحة يجب أن تكون «عالية بما يكفي لتستحق الفهرسة»، ولا يستطيع الاختبار المباشر فيها التحقق من هذه الحالة إطلاقًا.
كيف تختلف عن "Discovered – currently not indexed"
تأتي حالة Discovered – currently not indexed (تم اكتشافها - غير مفهرسة حاليًا) قبلها بخطوة: عثر Google على عنوان URL لكنه أجّل الزحف إليه لتجنب إثقال موقعك، لذلك يكون تاريخ آخر زحف فارغًا.
| Discovered – currently not indexed | Crawled – currently not indexed | |
|---|---|---|
| هل زحف إليها Google؟ | لا | نعم |
| تاريخ آخر زحف | فارغ | تاريخ محدد |
| السبب المعتاد | تأجيل الزحف لتجنب إثقال الموقع | قرأ Google الصفحة وتجاوزها |
| انظر أولًا إلى | سعة الزحف، في المواقع الكبيرة جدًا | جودة المحتوى، والصفحات المكررة، وcanonical |
ويقول Google أيضًا: «عدم الفهرسة ليس أمرًا سيئًا بالضرورة». فالصفحات التي تحمل noindex، وعناوين URL المحظورة في robots.txt، والصفحات المكررة، وصفحات 404 التي لا بديل لها، يُفترض أن تبقى خارج الفهرس.
لماذا يزحف Google إلى صفحات دون أن يفهرسها
للفهرسة معيار جودة لا يملكه الزحف. يقول دليل ميزانية الزحف من Google إن الطلب على الزحف يرتفع مع قيمة محتواك وتفرّده.
تندرج معظم عناوين URL المتأثرة تحت أحد هذه الأسباب، ولكل منها فحصه الأول:
- محتوى ضعيف أو غير أصلي: الصفحة تكرر ما يتصدر النتائج بالفعل.
- الصفحات المكررة: أرشيفات الوسوم، وعناوين URL المرتبة، ومقالتان عن موضوع واحد. إليك كيف تكتشف تضارب الكلمات المفتاحية وتصلحه.
- تعارضات canonical: قارن canonical الذي أعلنته بالذي اختاره Google. عندما يختار Google عنوان URL آخر، تنتقل الصفحة عادةً إلى Alternate page with proper canonical tag أو إلى حالة صفحة مكررة.
- Soft 404 وسلاسل إعادة التوجيه: يقول Google إن صفحات soft 404 تهدر ميزانية الزحف.
- ميزانية الزحف: تهم المواقع التي تضم أكثر من 1,000,000 صفحة تتغير أسبوعيًا أو أكثر من 10,000 تتغير يوميًا. وفي معظم المواقع، ليست هي السبب.
ارتفع المعيار على مرحلتين مؤرختين. في 18 أغسطس 2022، أعلن Google عن تحديث المحتوى المفيد، وهو إشارة على مستوى الموقع كله، وقال إن إزالة المحتوى غير المفيد قد تساعد بقية الموقع. وفي 5 مارس 2024، أعلن Google عن تحديث أساسي لعرض محتوى أقل مصنوع لجذب النقرات، إلى جانب سياسة جديدة لمكافحة إساءة استخدام المحتوى على نطاق واسع.
تقول إرشادات Google حول المحتوى المفيد إن E-E-A-T ليس عامل ترتيب محددًا، وإن الثقة هي الأهم، وإنه لا يوجد عدد كلمات مفضل. حشو الصفحة بالكلام لن يصلحها.
كيف تعثر على الصفحات المتأثرة وتشخّصها في GSC
افتح تقرير فهرسة الصفحات (المعروف سابقًا بتقرير التغطية)، وافحص عينة، ثم جمّع القائمة حسب النمط. ويشير Google إلى أن المواقع التي تضم أقل من 500 صفحة لا تحتاج على الأرجح إلى هذا التقرير.
العثور على عناوين URL المتأثرة في تقرير الصفحات
- في Google Search Console، انتقل إلى الفهرسة › الصفحات.
- في جدول "أسباب عدم فهرسة الصفحات"، انقر على Crawled – currently not indexed.
- انقر على تصدير ونزّل القائمة.
يعرض التقرير ما يصل إلى 1,000 عنوان URL كأمثلة، وليس بالضرورة كل العناوين، لذلك يكون التصدير في المواقع الكبيرة مجرد عينة.
فحص الصفحات باستخدام أداة فحص عنوان URL
افحص من خمسة إلى عشرة عناوين URL مصدّرة لمعرفة تاريخ آخر زحف وعنوان URL الأساسي الذي اختاره Google. إذا كان canonical يشير إلى مكان آخر، فهذا يعني أن Google يرى صفحة مكررة؛ وإذا كان تاريخ الزحف قديمًا بأشهر، فهذا يوحي بأن Google نادرًا ما يعود.
اكتشاف الأنماط عبر مئات عناوين URL
رتّب الملف المصدّر حسب المجلد والقالب ومعامل URL، ثم عُدّ كل مجموعة. لنفترض أن 300 عنوان URL انقسمت إلى 180 صفحة /tag/ و70 عنوانًا بـ ?sort= و50 مقالة: هذه ثلاثة قرارات، لا 300.
أصلح أو أضف noindex أو احذف: قرر ما يستحقه كل عنوان URL
يستحق كل عنوان URL واحدة من أربع نتائج. اسأل نفسك: هل سيسعد الباحث بالوصول إلى هنا، وهل هذه هي الصفحة الوحيدة في موقعك التي تجيب عن الاستعلام؟
| نوع الصفحة | مثال | القرار | الطريقة |
|---|---|---|---|
| مفيدة وفريدة لكنها ضعيفة | دليل من 300 كلمة عن موضوع تعرفه | تحسين | أضف عمقًا وتفاصيل من تجربتك المباشرة |
| تكرر صفحة أقوى | مقالتان عن الاستعلام نفسه | دمج | انقل المحتوى، ثم أعد التوجيه بـ 301 |
| مفيدة في الموقع، لا في البحث | أرشيفات الوسوم، والبحث الداخلي، وصفحات الشكر | Noindex | علامة meta robots أو X-Robots-Tag |
| بلا قيمة ولا بديل | عروض منتهية، وصفحات اختبار | حذف | اعرض 404 أو 410 |
يدعم دليل ميزانية الزحف من Google الصفين الأخيرين: اعرض 404 أو 410 للصفحات المحذوفة وادمج الصفحات المكررة. ومن المتوقع ظهور 404 في Search Console للصفحات التي حذفتها عمدًا.
في noindex تحديدًا يقع معظم الخطأ عند الفرز:
ليس هكذا: علامة noindex على صفحات /tag/ بينما يحظر robots.txt المسار /tag/. لا يستطيع Googlebot جلب الصفحات، لذلك لا يرى العلامة أبدًا.
بل هكذا: تبقى /tag/ قابلة للزحف وتحمل noindex كعلامة meta أو كرأس X-Robots-Tag.
بحسب وثائق noindex من Google، لا تعمل القاعدة داخل robots.txt، وقد تستغرق إعادة الزحف أشهرًا في الصفحات التي نادرًا ما تُزار. بمجرد قراءة العلامة، تنتقل تلك العناوين إلى مستبعدة بواسطة علامة 'noindex'، وهذا ما تريده لها.
كيف تصلح الصفحات التي تستحق الفهرسة
اجعل الصفحة جديرة بالفهرسة أولًا، ثم أخبر Google. طلب فهرسة صفحة لم تتغير يعني أنك تطلب من Google تكرار قرار اتخذه بالفعل. الترتيب:
- حسّن المحتوى.
- ادمج الصفحات المكررة وأصلح canonical.
- أضف روابط داخلية.
- أرسل خريطة موقع مركّزة واطلب الفهرسة.
حسّن عمق المحتوى وأصالته
أعد الكتابة وعينك على الاستعلام، لا على عدد الكلمات: أضف بياناتك الخاصة، ولقطات الشاشة، ومثالًا تطبيقيًا، وإجابة مباشرة في أعلى الصفحة.
على سبيل المثال، خذ دليلًا ضعيفًا من 300 كلمة: أضف مجموعة بيانات من تجربتك المباشرة ومثالًا تطبيقيًا، واربطه من مقالتين تحصلان على زيارات بالفعل، وبعد ذلك فقط أضفه إلى خريطة موقع مركّزة.
ادمج الصفحات المكررة وأصلح canonical
عندما يغطي عنوانا URL الموضوع نفسه، احتفظ بواحد، وانقل إليه المحتوى المفيد، وأعد توجيه الآخر بـ 301 إليه مباشرة، دون سلسلة. ثم تأكد من أن علامات canonical وخريطة الموقع والروابط الداخلية متفقة، وأنه لم يتبقّ أي noindex شارد.
أضف روابط داخلية من صفحات يقدّرها Google بالفعل
اربط كل صفحة أصلحتها من صفحات مفهرسة تحصل على زيارات، بنص رابط وصفي. يستطيع أي زاحف مواقع سرد الصفحات اليتيمة (بلا روابط داخلية) بتصفية الصفحات التي لا تتلقى أي رابط داخلي. وتجد الطريقة الكاملة في دليل استراتيجية الروابط الداخلية هذا.
وافحص الصفحة أيضًا على الهاتف وفي تقرير Core Web Vitals: الصفحة المعطلة على الجوال سبب يسهل استبعاده بسرعة.
أرسل خريطة موقع مركّزة واطلب الفهرسة
أنشئ خريطة موقع لا تضم إلا عناوين URL التي أصلحتها، وأرسلها، وصفِّ تقرير الصفحات بها قبل النقر على التحقق من الإصلاح. يقترح Google ذلك لتسريع التحقق. وإذا كنت تحتاج إلى ملفك الحالي أولًا، فابحث عن خريطة موقعك.
يقول Google إنه يتجاهل priority وchangefreq، لذلك حافظ على دقة lastmod بدلًا منهما. ثم انقر على طلب الفهرسة في أداة فحص عنوان URL لعناوينك ذات الأولوية: يطبّق Google حصة محددة ويقول إن تكرار الطلبات لا يسرّع الأمور.
كم تستغرق الفهرسة بعد الإصلاح؟
توقّع ما بين يوم وعدة أسابيع، والفهرسة ليست مضمونة أبدًا. يذكر Google مددًا مختلفة في صفحات مختلفة، وإليك إياها جنبًا إلى جنب:
| ما فعلته | ما يقوله Google | المصدر |
|---|---|---|
| طلبت من Google إعادة الزحف | من بضعة أيام إلى بضعة أسابيع | طلب إعادة الزحف من Google |
| طلب الفهرسة | يوم تقريبًا عادةً، وحتى أسبوع أو أسبوعين، مع حد يومي | مساعدة فحص عنوان URL |
| التحقق من الإصلاح | نحو أسبوعين، وأحيانًا أطول بكثير | مساعدة فهرسة الصفحات |
هذه هي المدد الزمنية التي يذكرها Google، لا حالات تعافٍ فعلية. راجع تقرير الصفحات أسبوعيًا؛ وإذا لم تتحرك العناوين التي أصلحتها بعد انقضاء هذه المدد، فعد إلى المحتوى.
كيف تمنع الصفحات الجديدة من الوقوع في هذه الحالة
الوقاية روتين: افحص كل صفحة قبل نشرها، وراجع Search Console شهريًا. قبل النشر، تأكد من أن الصفحة:
- تجيب عن استعلام لا تجيب عنه أي صفحة أخرى في موقعك.
- تضيف بياناتك الخاصة أو أمثلتك أو تجربتك.
- تحمل canonical يشير إلى نفسها ولا تحمل أي noindex شارد.
- موجودة في خريطة الموقع مع lastmod دقيق.
- لها مؤلف مسمّى، وبيانات منظمة حيثما ينطبق ذلك.
- تتلقى رابطًا من صفحة ذات صلة ومفهرسة.
مرة كل شهر، قارن تقرير الصفحات بالشهر السابق؛ إذ تبقى المشكلة مدرجة لمدة 90 يومًا بعد اختفاء آخر حالة لها. وينبغي للمواقع التي تتجاوز ألف صفحة أن تراقب أيضًا تقرير إحصاءات الزحف.
يتولى SEOcrawl AI الجانب التقني على نطاق واسع. يفحص Crawler كل صفحة ويعرض Audit Health Score، مع تقسيم المشكلات حسب Indexability وCrawlability وOn-Page وغيرها. ويجمع عرض Indexation فيه عناوينك حسب حالة التغطية في Search Console، لترى كم منها في "Crawled – currently not indexed" وتتابع العدد بمرور الوقت.
وبين عمليات الزحف، ينبّهك SEO Monitor عندما تكتسب صفحة مهمة علامة noindex، أو يتغير canonical الخاص بها، أو تعرض 404، أو تخرج من خريطة الموقع. وتتتبع المنصة نفسها ظهور علامتك التجارية في ChatGPT وClaude وGemini وPerplexity وCopilot، ليجتمع SEO وGEO في مكان واحد.
الأسئلة الشائعة
ماذا تعني حالة "Crawled – currently not indexed"؟
تعني أن Googlebot جلب صفحتك وقرر عدم إضافتها إلى فهرس Google، لذلك لا يمكن أن تظهر في البحث. لم يمنع شيء الزحف: قرأ Google الصفحة واختار أن يبقيها خارج الفهرس في الوقت الحالي. هذه ليست عقوبة يدوية، وقد تُفهرس الصفحة في المستقبل وقد لا تُفهرس.
هل هي نفسها حالة "Discovered – currently not indexed"؟
لا. تعني "Discovered" أن Google يعرف عنوان URL لكنه أجّل الزحف إليه، لذلك يكون تاريخ آخر زحف فارغًا. أما "Crawled" فتعني أن Google زار الصفحة وقرأها بالفعل، ثم قرر عدم فهرستها. مع Discovered، انظر إلى سعة الزحف في المواقع الكبيرة جدًا؛ ومع Crawled، انظر إلى جودة المحتوى والصفحات المكررة وعلامات canonical.
هل تضر حالة "Crawled – currently not indexed" بـ SEO موقعي؟
ليس في حد ذاتها: الحالة ليست عقوبة، والصفحة المتأثرة تخسر زيارات البحث الخاصة بها فقط. يكمن الخطر في الحجم، لأن Google يتعامل مع نسبة كبيرة من المحتوى غير المفيد كـإشارة على مستوى الموقع كله. أرشيف وسوم خارج الفهرس لا يكلّفك شيئًا؛ أما صفحة منتج فتكلّفك. إذا ارتفع العدد كلما نشرت شيئًا، فتعامل معها كمشكلة محتوى على مستوى الموقع، لا كقائمة من عناوين URL منفردة.
كم يستغرق فهرسة الصفحة بعد الإصلاح؟
توقّع ما بين يوم وعدة أسابيع، والفهرسة ليست مضمونة أبدًا. يقول Google إن إعادة الزحف تستغرق من بضعة أيام إلى بضعة أسابيع، وإن طلب الفهرسة يُعالج عادةً خلال يوم تقريبًا لكنه قد يستغرق أسبوعًا أو أسبوعين، وإن التحقق من الإصلاح يستغرق عادةً نحو أسبوعين.
هل يفيد طلب الفهرسة؟
فقط بعد أن تغيّر الصفحة. طلب فهرسة صفحة لم تتغير يعني أنك تطلب من Google تكرار قرار اتخذه بالفعل. تخضع الطلبات لحصة يومية، ويقول Google إن إرسال عنوان URL نفسه عدة مرات لا يسرّع شيئًا.
هل تفيد إضافة الصفحة إلى ملف XML Sitemap؟
تساعد Google على العثور على عنوان URL، لا على فهرسته. يصف Google خريطة الموقع المرسلة بأنها «مجرد تلميح»، وهذه الصفحات عُثر عليها وقُرئت بالفعل. بعد الإصلاح، تتمثل مهمة خريطة الموقع في تجميع عناوين URL التي تريد إعادة فحصها. يتسع كل ملف خريطة موقع لما يصل إلى 50,000 عنوان URL أو 50 MB.
لماذا فشل التحقق من الإصلاح لحالة "Crawled – currently not indexed"؟
يتوقف التحقق بمجرد أن يجد Google عنوان URL واحدًا في المجموعة لم يُصلح بعد، لذلك قد تُفشل صفحة واحدة متبقية الدفعة كلها. أصلح كل عنوان URL في المجموعة، أو ضيّق المجموعة بتصفية التقرير بخريطة موقع لا تضم إلا العناوين التي أصلحتها، ثم أعد التحقق.
كيف يساعد SEOcrawl AI مع الصفحات التي يزحف إليها Google ولا يفهرسها؟
يكشف SEOcrawl AI الأسباب الموجودة داخل الموقع وراء هذه الحالة. يعرض Crawler لكل عنوان URL درجة الصحة ورمز حالة HTTP وعمق الزحف، لتكتشف الصفحات التي يصعب على Google الوصول إليها. ويجمع عرض Indexation عناوينك حسب حالة التغطية في Search Console، وينبّهك SEO Monitor عندما تكتسب صفحة مهمة علامة noindex، أو يتغير canonical الخاص بها، أو تعرض 404، أو تخرج من خريطة الموقع.
بقلم: David Kaufmann
قضيتُ السنوات العشر الأخيرة منشغلًا تمامًا بـ SEO — وبصراحة، لم أكن لأبدّل ذلك بأي شيء آخر.
تطوّرت مسيرتي إلى مستوى جديد عندما عملت أخصّائيَّ SEO أوّل في Chess.com — أحد أكثر 100 موقع زيارةً على الإنترنت بأكمله. العمل على هذا النطاق علّمني ما لم تعلّمه لي أي دورة أو شهادة.
من هذه التجربة، أسّستُ SEO Alive — وكالة للعلامات التجارية الجادّة بشأن النموّ العضوي. وبما أنّي لم أجد أداةً تُتقن العالَمَين الكلاسيكي وعصر الذكاء الاصطناعي، بنيتُ SEOcrawl AI. إن كنت تبحث عن شريك SEO خبير يعشق هذا المجال — يسعدني التواصل معك!
اكتشف المزيد من محتوى هذا الكاتب
