Googlebot Evergreen: Il Nuovo Crawler di Google

Googlebot Evergreen: Il Nuovo Crawler di Google
David Kaufmann
Tutorial SEO
5 min read

Il mondo SEO ha motivo di festeggiare grazie all'ultimo articolo pubblicato dal team Google Webmasters, che annuncia che la nuova versione del loro Googlebot, chiamata GoogleBot Evergreen, sarà disponibile anche per gli strumenti per webmaster.

Di seguito, vedremo le implicazioni che questo ha a livello di implementazione tecnica dal punto di vista SEO.

1) Cos'è GoogleBot Evergreen?

Fino a poco tempo fa, il Bot di Google (crawler) utilizzava Google Chrome 41 per analizzare tutti i siti web su Internet. Considerando che Google Chrome è ora alla versione 78, puoi immaginare quanto fosse indietro GoogleBot rispetto al suo browser. Tuttavia, al recente evento Google I/O, hanno annunciato molti miglioramenti a riguardo. Il principale era che, da allora, non solo GoogleBot avrebbe utilizzato la nuova versione di Chrome, ma il suo aggiornamento sarebbe stato collegato in modo da utilizzare sempre le ultime versioni.

GoogleBot Evergreen
GoogleBot Evergreen

Google annuncia il suo nuovo motore di rendering: GoogleBot Evergreen

Di seguito, puoi guardare il video del team Search, in cui hanno fatto il grande annuncio di GoogleBot Evergreen e hanno anche discusso statistiche sul mondo SEO e i piani di Google per i loro prossimi progetti e miglioramenti nel 2019.

È un video di 40 minuti ma vale davvero la pena guardarlo. Innanzitutto, perché presenta probabilmente 2 dei più grandi esperti SEO di Google, e in secondo luogo, perché si concentrano sull'evoluzione del mondo SEO e su come possiamo adattarci per servire i migliori contenuti agli utenti.

2) Implicazioni

Il cambiamento fondamentale e più importante nel passaggio da Chrome 41 a Chromium (ultime versioni) è che d'ora in poi, GoogleBot può eseguire Javascript e renderizzare le pagine. Fino ad ora, questo processo era molto più lento o addirittura impossibile a meno che non venissero utilizzati determinati strumenti per creare pagine statiche per il bot (Prerender.io, Puppeteer...) se il sito era costruito con software JavaScript moderno (Vue...). Tuttavia, con questo miglioramento, Google sarà in grado di comprendere molti più siti che in precedenza erano inaccessibili.

Nell'immagine seguente, puoi vedere come il vecchio GoogleBot con Chrome 41 comprendeva un sito e come elabora il contenuto con la nuova versione.

Esempio di Crawling di GoogleBot
Esempio di Crawling di GoogleBot

Esempio di come GoogleBot vedeva una pagina prima e dopo il cambiamento.

Per le grandi aziende con team tecnici estesi, questo non era un grosso problema poiché potevano allocare le risorse necessarie. Tuttavia, per le piccole e medie imprese, questo poteva essere un vero mal di testa. Ecco perché questo cambiamento può aiutare molte aziende ad assicurarsi che i loro contenuti possano essere correttamente scansionati e indicizzati.

Ora, se stai pensando al tuo sito e ti stai chiedendo come potrebbe influenzarti, nota che secondo lo stesso team di Google, la risposta è "non dovrebbe", poiché in linea di principio i cambiamenti non dovrebbero nemmeno essere evidenti. Perché?

  • Questa tecnologia è stata accuratamente testata.
  • Sono state effettuate analisi nel corso di diversi mesi su molti siti web.
  • Lo user-agent non sarà cambiato senza preavviso per evitare di interrompere i tuoi schemi di tracciamento/logging...

Uno dei principali cambiamenti annunciati questa settimana è che questo nuovo motore di rendering è stato applicato anche agli strumenti SEO per Webmaster in modo che tutti i professionisti SEO possano eseguire ogni tipo di test e analisi:

3) Mobile First Index

Un'altra grande notizia che è arrivata insieme all'annuncio di GoogleBot Evergreen è stato l'annuncio di cambiamenti relativi al mondo Mobile.

Mobile First Index
Mobile First Index

Probabilmente, entro la fine del 2019, tutti i siti web su Internet saranno scansionati tramite GoogleBot Mobile.

Il team Google Search ha rivelato alcune statistiche davvero impattanti:

  • Più del 50% dei siti web viene analizzato con GoogleBot Mobile.
  • Entro la fine del 2019 o l'inizio del 2020, Google potrebbe analizzare il 100% di Internet con GoogleBot Mobile.
  • GoogleBot scansiona +130 trilioni di pagine.
  • La velocità del tuo sito sui dispositivi mobili è un fattore di ranking e ha un impatto diretto sulle conversioni, sul tempo sulla pagina e su altri fattori critici per qualsiasi attività.

4) Aggiornamenti

Poiché si tratta di un argomento in continua evoluzione, abbiamo creato questa sezione per pubblicare tutte le notizie relative al motore di Google.

2 ottobre 2019: Google annuncia che a partire da dicembre 2019, lo user-agent di GoogleBot verrà adeguato per riflettere l'ultima versione del browser e verrà aggiornato in base alle ultime versioni di Chrome.

Questi sono gli user-agent attuali:

  • Mobile:

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

  • Desktop

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) A partire da dicembre, tuttavia, i nuovi user-agent saranno i seguenti:

  • Mobile

Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

  • Desktop

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) ** I simboli "W.X.Y.Z" saranno sostituiti con le versioni di Google Chrome man mano che vengono rilasciate. *

Hai domande, dubbi o suggerimenti su quello che hai appena letto? Ci piacerebbe sentire la tua opinione! Grazie mille per contribuire alla conoscenza condivisa nel mondo SEO.

** Tutte le immagini sono per gentile concessione di Google (video YouTube). *

Autore: David Kaufmann

David Kaufmann

Ho passato gli ultimi oltre 10 anni completamente ossessionato dal SEO — e onestamente, non vorrei fosse altrimenti.

La mia carriera ha fatto un salto di qualità quando ho lavorato come Senior SEO Specialist per Chess.com — uno dei 100 siti più visitati dell'intero Internet. Operare a quella scala, su milioni di pagine, decine di lingue e in una delle SERPs più competitive in assoluto, mi ha insegnato cose che nessun corso o certificazione avrebbe mai potuto. Quell'esperienza ha cambiato la mia prospettiva su come dovrebbe essere davvero un grande SEO — ed è diventata la base di tutto ciò che ho costruito da allora.

Da quell'esperienza è nata SEO Alive — un'agenzia per brand che fanno sul serio con la crescita organica. Non siamo qui per vendere dashboards e report mensili. Siamo qui per costruire strategie che spostino davvero l'ago della bilancia, combinando il meglio del SEO classico con l'entusiasmante nuovo mondo della Generative Engine Optimization (GEO) — facendo in modo che il tuo brand appaia non solo nei link blu di Google, ma anche all'interno delle risposte generate dall'AI che ChatGPT, Perplexity e Google AI Overviews consegnano ogni giorno a milioni di persone.

E poiché non riuscivo a trovare uno strumento che gestisse correttamente entrambi questi mondi, me ne sono costruito uno — SEOcrawl, una piattaforma enterprise di SEO intelligence che unisce rankings, audit tecnici, monitoraggio dei backlinks, salute del crawl e tracciamento della visibilità del brand nell'AI, tutto in un unico posto. È la piattaforma che ho sempre desiderato esistesse.

→ Leggi tutti gli articoli di David
Altri articoli di David Kaufmann

Scopri altri contenuti di questo autore