Indexeren: wat het is en hoe Google pagina's indexeert

Het belang in SEO

De relatie tussen indexering en SEO is complexer dan op het eerste gezicht lijkt.

Om te beginnen moet een URL geïndexeerd zijn om rankingdoelen na te streven in de zoekresultaten. Hoe goed je een pagina ook optimaliseert, als deze niet geïndexeerd is, ontvang je geen bezoeken van de zoekmachine.

Aan de andere kant krijgt een pagina op het moment dat hij geïndexeerd is een rankingpositie toegewezen. De exacte positie hangt af van de overige SEO-factoren on-page en off-page waaraan we tot dan toe hebben gewerkt.

Aan deze factoren kunnen we andere toevoegen die we in meer of mindere mate kunnen controleren, afhankelijk van elk geval. We hebben het over:

• ›

  de leeftijd van de site

• ›

  het tempo van het publiceren van URL's die geïndexeerd moeten worden

• ›

  bestaande concurrentie, etc.

Bovendien beïnvloedt indexering op kwantitatief niveau ook de SEO-ranking van een pagina. Hoe meer URL's een domein heeft geïndexeerd, hoe meer gewicht het krijgt in de zoekmachine ten opzichte van de concurrentie, logischerwijs zolang deze URL's van hoge kwaliteit zijn — niet alleen kwantiteit maar kwaliteit telt, dat nemen we als vanzelfsprekend aan.

Methoden om te weten welke pagina's ik geïndexeerd heb

Er zijn verschillende manieren waarop we kunnen weten hoeveel en welke pagina's geïndexeerd zijn. Hieronder identificeren we twee van de meest nuttige:

Search Console

Google Search Console is waarschijnlijk de meest gebruikte tool, zowel voor het bekijken van geïndexeerde pagina's als voor de controle en het beheer van andere SEO-parameters van een website.

In de sectie Index hebben we alle informatie die we nodig hebben over de indexering van onze website.

Het Coverage-rapport biedt ons een geschiedenis van geïndexeerde pagina's, met aanduiding van degene met fouten, degene die gevalideerd zijn en degene die uitgesloten zijn, met de mogelijkheid om vergelijkingen te maken.

Site-commando

Een snelle manier om de realtime indexering van een webpagina te controleren is met het "site:"-commando.

We moeten het in de zoekmachine zelf gebruiken, door te typen: site:mijndomein.com. De zoekresultaten tonen vervolgens zowel het aantal geïndexeerde URL's als een lijst van allemaal.

Het is normaal dat er kleine verschillen bestaan tussen de resultaten van Search Console en die verkregen via het site-commando; dit gebeurt meestal vanwege wanneer elk de gegevens verzamelt.

Hoe webcontent te indexeren

De ideale situatie zou zijn dat zodra een URL is gepubliceerd, deze automatisch zou worden geïndexeerd. Maar de realiteit is niet zo gunstig.

Wat in de praktijk gebeurt, is dat Google (zoals de andere zoekmachines) gebruikmaakt van verschillende crawl-robots over het internet om bestaande URL's te identificeren, degene die stabiel blijven, degene die gewijzigd worden, degene die verdwenen zijn, en ook de nieuwe URL's.

Als het een nieuwe URL detecteert en de website alles wat nodig is heeft geoptimaliseerd om de toegang van de robot te bevorderen, analyseert het de URL en, als deze voldoet aan de basisvoorwaarden, indexeert het deze en staat het de publicatie ervan toe in de zoekresultaten.

Zoals we al noemden, gebeurt dit niet met de snelheid die we zouden willen. Om de indexering van nieuwe URL's te versnellen kun je:

• ›

  Content gebruiken die veel verkeer heeft op onze website om een interne link naar die pagina's toe te voegen om het crawlen en daarmee de indexering te verbeteren

• ›

  De sitemap gebruiken zoals we al noemden

• ›

  De Google Search Console-tool, "URL inspecteren" gebruiken

om vervolgens indexering te forceren via "Indexering aanvragen"

• ›

  Via vermeldingen op sociale profielen, zoals Twitter, Facebook, etc. Deze methode was vroeger effectiever, maar als we een aanzienlijk aantal gebruikers hebben die bezoeken aan de content genereren, werkt het meestal goed.

• ›

  Via indexeerprogramma's: er zijn er meerdere op de markt, sommige gratis en de meeste betaald. Ze werken meestal online en zijn meestal nuttig voor massale URL-indexering, maar persoonlijk raden we de andere methoden aan.

Is het noodzakelijk om alle content te indexeren?

We zouden kunnen denken dat 100% van onze online content indexeerbaar is en bovendien dat het ons in alle opzichten voordeel oplevert. Maar dit is niet het geval.

Het indexeren van elk element van een website zou kunnen impliceren dat er duplicate content bestaat, het indexeren van pagina's zonder waarde, etc. Daarom is het belangrijk om indexeerlimieten te hebben.

Om deze reden worden veel URL's, zoals die met betrekking tot tags, juridische pagina's, filters, interne zoekresultaten en dergelijke, uitgesloten van deze indexering, terwijl de rest op een geldige manier wordt geïndexeerd.

Sitemap en indexering

De sitemap vormt de hoeksteen van de indexering van een webpagina. Het is een bestand dat dient als tussenpersoon in de communicatie tussen de zoekrobot en de website, waarbij het wordt geïnformeerd over welke URL's indexeerbaar zijn, hoe ze zijn georganiseerd in de webstructuur en de datum van hun laatste update.

Hoe je deze gebruikt om indexering te verbeteren

Er zijn verschillende manieren om een sitemap te maken. Tegenwoordig is de eenvoudigste manier om gebruik te maken van een SEO-optimalisatie- en beheerplugin die deze optie bevat.

Je moet de sitemap maken en de publicatie ervan op het domein toestaan, meestal in deze structuur: mijndomein.com/sitemap.xml.

Als je een betere indexering via de sitemap wilt garanderen, registreer dan je domein in Google Search Console en in de sectie Index zie je dat er een Sitemap-sectie is. Als je het adres van je sitemap opneemt, heeft Google vanaf nu betere toegang tot je bestand, zal het je URL's sneller indexeren en kun je de hele evolutie van deze indexering vanuit deze online tool monitoren.

Hoe URL's te deïndexeren

Er is een andere manier om de sitemap te gebruiken om URL's te deïndexeren, en het lijkt misschien contraproductief voor het concept zelf van dit element, maar het is best nuttig. Het bestaat uit het toevoegen van de noindex-tag aan de set URL's die we willen deïndexeren, en het uploaden van alleen deze URL's naar de sitemap. Op deze manier dwingen we Google om ze eerder te crawlen en, na het zien van de noindex-tag, ze te deïndexeren.

Aanbevolen artikel -> Hoe een URL uit Google te deïndexeren

Via Search Console

In Google Search Console kun je Google verzoeken een URL te deïndexeren. Hiervoor moet je naar de sectie Index gaan en de sectie URL Removal. Je hebt verschillende opties, waarbij urgente content removal de meest aanbevolen is.

Je hoeft alleen maar een nieuw verzoek aan te maken, de URL die je wilt deïndexeren op te nemen en Google houdt er rekening mee, om het proces zo snel mogelijk uit te voeren.

Noindex-directive

Als er bepaalde URL's of zelfs hele secties zijn die je wilt voorkomen dat ze geïndexeerd worden, geef je met de noindex-directive aan Google door dat het er geen rekening mee moet houden telkens wanneer het je website crawlt.

Zoals je hebt kunnen vaststellen, speelt indexering een fundamentele rol in de SEO-ranking, en het is raadzaam om de indexeringsstatus van onze sites te monitoren en de nodige behandeling te geven aan de verschillende pagina's die deel uitmaken van onze website.