الفهرسة: ما هي وكيف يفهرس Google الصفحات؟

أهميتها في SEO

العلاقة بين الفهرسة و SEO أكثر تعقيدًا مما تبدو في الوهلة الأولى.

أولًا، لتحقيق هدف الترتيب في نتائج البحث، يجب أن يكون URL مفهرسًا بالضرورة. مهما كانت الصفحة محسَّنة جيدًا، فإنها لن تتلقى أي زيارات من محرك البحث إذا لم تكن مفهرسة.

من ناحية أخرى، تُحدَّد مكانة الترتيب في اللحظة التي تُفهرس فيها الصفحة. يعتمد المركز الدقيق على باقي عوامل SEO (on-page و off-page) التي عملت عليها حتى تلك اللحظة.

يمكن أن نضيف إلى هذه العوامل عوامل أخرى لدينا تحكم نسبي فيها، يختلف من حالة إلى أخرى. وهذا يعني:

• ›

  عمر الموقع

• ›

  معدل النشر للـ URLs التي تحتاج إلى فهرسة

• ›

  المنافسة الموجودة، إلخ.

كما تؤثر الفهرسة على المستوى الكمي على ترتيب SEO للصفحة. كلما زاد عدد URLs المفهرسة في النطاق، زاد وزنه في محركات البحث مقارنة بالمنافسين. بالطبع، شريطة أن تكون هذه URLs ذات جودة عالية — لأن الكمية ليست هي المهمة فحسب، بل الجودة أيضًا.

كيفية معرفة الصفحات المفهرسة

هناك عدة طرق لمعرفة كم عدد ونوع الصفحات المفهرسة. أدناه نُحدِّد الطريقتين الأكثر فائدة:

Search Console

ربما يكون Google Search Console الأداة الأكثر استخدامًا لرؤية الصفحات المفهرسة، فضلًا عن التحكم في معاملات SEO الأخرى للموقع وإدارتها.

في قسم Index لدينا كل المعلومات اللازمة المتعلقة بفهرسة الموقع.

يقدم تقرير Coverage سجلًا للصفحات المفهرسة، ويعرض الصفحات التي بها أخطاء، والمحققة، والمستبعدة، مع إمكانية مقارنتها.

أمر Site

طريقة سريعة للتحقق من الفهرسة الحية لصفحة ويب هي أمر "site:".

يجب استخدامه في محرك البحث نفسه، بكتابة site:mydomain.com. ستعرض نتائج البحث عدد URLs المفهرسة وقائمة بجميع URLs.

من الطبيعي أن يكون هناك بعض الفرق بين النتائج التي تم الحصول عليها من Search Console وتلك التي تم الحصول عليها بأمر site. عادةً ما يكون ذلك بسبب اللحظة التي جمعت فيها كل منهما البيانات.

كيفية فهرسة محتوى الويب

الوضع المثالي هو أن يُفهرس URL تلقائيًا بمجرد نشره. لكن الواقع ليس مواتيًا إلى هذا الحد.

ما يحدث فعليًا هو أن Google (مثله مثل محركات البحث الأخرى) يستخدم عدة bots crawl عبر الإنترنت للتعرف على URLs الموجودة، تلك التي تظل مستقرة، أو المعدلة، أو المختفية، وأيضًا الجديدة.

عند اكتشاف URL جديد، إذا كان الموقع قد أعدّ كل ما هو ضروري لتسهيل وصول bots، يقوم بتحليله، وإذا استوفى الشروط الأساسية، يفهرسه ويتيح نشره في نتائج البحث.

كما ذكرنا، لا يحدث هذا بالسرعة التي نريدها. لتسريع فهرسة URL جديد، يمكنك:

• ›

  استخدام محتوى ذي حركة مرور عالية في الموقع لإضافة روابط داخلية إلى تلك الصفحة لتحسين الـ crawl والفهرسة

• ›

  استخدام sitemap المذكور بالفعل

• ›

  استخدام "فحص URL" في أداة Google Search Console

ثم يمكنك فرض الفهرسة من خلال "طلب الفهرسة"

• ›

  من خلال الإشارات في الملفات الشخصية على وسائل التواصل مثل Twitter و Facebook، إلخ. كانت هذه الطريقة أكثر فاعلية في الماضي، لكنها تعمل بشكل جيد عمومًا إذا كان لديك عدد كبير من المستخدمين الذين يولّدون زيارات بمحتواك.

• ›

  من خلال برامج فهرسة، هناك العديد منها في السوق، بعضها مجاني ومعظمها مدفوع. عادةً ما تعمل عبر الإنترنت وتُستخدم عمومًا للفهرسة الجماعية لـ URLs، لكنني شخصيًا أوصي بطرق أخرى.

هل يجب فهرسة كل المحتوى؟

قد يبدو أن 100% من المحتوى عبر الإنترنت قابل للفهرسة، بل وأن ذلك في صالحنا في كل النواحي. لكن الأمر ليس كذلك.

عند فهرسة كل عناصر الموقع، قد يوجد محتوى مكرر، وفهرسة لصفحات بلا قيمة، إلخ. لذلك من المهم تحديد حد للفهرسة.

لهذا السبب، تُستبعد الكثير من URLs المتعلقة بالوسوم، الصفحات القانونية، الفلاتر، نتائج البحث الداخلي، إلخ، من هذه الفهرسة، بينما تُفهرس البقية بطريقة صحيحة.

sitemap والفهرسة

تُمثل sitemap حجر الزاوية لفهرسة صفحة الويب. إنه ملف يعمل كوسيط في التواصل بين bots البحث والموقع، ويُخبرنا أي URLs قابلة للفهرسة، وكيف تُهيكل في بنية الويب، وآخر تاريخ تحديث.

كيفية استخدامه لتحسين الفهرسة

هناك طرق متعددة لإنشاء sitemap. اليوم، أسهل طريقة هي الاستفادة من plugin لتحسين SEO وإدارته يتضمن هذا الخيار.

علينا التأكد من إنشاء sitemap ونشره في النطاق، عادةً بهيكل mydomain.com/sitemap.xml.

إذا كنت ترغب في ضمان فهرسة أفضل من خلال sitemap، فبتسجيل النطاق في Google Search Console، سترى أن قسم Index يحتوي على قسم Sitemap. بإدراج عنوان sitemap، سيكون لدى Google من الآن فصاعدًا وصول أفضل إلى الملف وسيفهرس URLs بشكل أسرع، ويمكنك مراقبة كل تطور الفهرسة في هذه الأداة عبر الإنترنت.

كيفية إلغاء فهرسة URL

هناك طريقة أخرى لاستخدام sitemap لإلغاء فهرسة URLs، وقد يبدو هذا متناقضًا مع مفهوم هذا العنصر، لكنه مفيد جدًا. الفكرة هي إضافة وسم noindex إلى مجموعة URLs التي ترغب في إلغاء فهرستها ورفع هذه URLs فقط في sitemap. بهذه الطريقة، تُجبر Google على إجراء crawl أسرع وعند رؤية وسم noindex، يقوم بإلغاء فهرستها.

مقال موصى به -> كيفية إلغاء فهرسة URL في Google

من خلال Search Console

في Google Search Console، يمكن طلب إلغاء فهرسة URL من Google. للقيام بذلك، يجب الوصول إلى قسم Index وقسم إزالة URLs. هناك عدة خيارات، وأكثرها تفضيلًا هو الإزالة العاجلة للمحتوى.

عند إنشاء طلب جديد وإدراج URLs التي ترغب في إلغاء فهرستها، سيأخذها Google في الاعتبار لإجراء العملية في أقرب وقت ممكن.

توجيه Noindex

إذا كنت لا ترغب في فهرسة URLs معينة أو أقسام كاملة، فاستخدم توجيه noindex لإخبار Google بعدم أخذها في الاعتبار في كل مرة يقوم فيها بإجراء crawl للموقع.

كما رأيت، تلعب الفهرسة دورًا أساسيًا في ترتيب SEO، ويُنصح بمراقبة حالة فهرسة موقعك وتقديم المعالجة اللازمة للصفحات المختلفة التي تُكوِّن موقعك.