Nouveau rapport Statistiques d'exploration dans Search Console

Fin novembre 2020, Google a relancé son rapport de statistiques d'exploration revisité, et il semble que le monde du SEO technique en ait été bouleversé. Il s'appelle désormais Crawl Stats (Statistiques d'exploration) et, grâce à lui, vous pourrez découvrir comment les différents bots de Google visitent votre site et obtenir des informations précieuses à partir de ces données très utiles.
Qu'est-ce que Google Crawl Stats ?
Il s'agit d'une refonte complète de la section « statistiques d'exploration » qui se trouvait dans l'ancien Webmaster Tools. Grâce à elle, nous pouvons accéder à différentes données et statistiques sur l'historique d'exploration de Googlebot sur notre site web. Dans la nouvelle version, cela devient un outil pour travailler, dans une certaine mesure, avec les logs et ce n'est plus simplement un graphique de visualisation.
Vous pouvez accéder à ce rapport depuis votre compte Search Console, dans Paramètres > Statistiques d'exploration.
Quoi de neuf dans le rapport revisité
Il apporte plusieurs nouveautés :
- Nombre total de requêtes du bot regroupées par code de réponse, type de fichier exploré, objectif de l'exploration et type de Googlebot. Certaines vous seront très utiles.
- Informations détaillées sur le statut de l'hôte.
- Exemples d'URL pour montrer à quel endroit du site les différentes requêtes ont eu lieu.
- Récapitulatif complet des propriétés à hôtes multiples et prise en charge des propriétés de domaine.
Sections de l'outil d'analyse de logs de Google
Nous vous invitons à un voyage à travers les différentes sections de Crawl Stats. Vous nous accompagnez ?
Graphique des statistiques d'exploration
Ce nouveau graphique, déjà adapté au design actuel de Search Console, affiche les statistiques d'exploration au fil du temps. Vous pouvez y consulter trois métriques :
- Le nombre total de requêtes d'exploration sur une période, ou par jour si vous passez le curseur sur le graphique.
- La taille totale des données téléchargées en octets.
- Le temps de réponse moyen en millisecondes.

Pour l'instant, rien de très nouveau ; c'est davantage un changement d'interface. Mais regardons les sections suivantes…
Exploration des différents hôtes de votre propriété de domaine
Votre propriété de domaine dans Search Console peut être composée de plusieurs hôtes, comme les versions avec et sans www, ou n'importe quel sous-domaine que vous possédez. Ce graphique vous permet de voir comment Googlebot les explore et vous pouvez cliquer sur chacun d'eux pour obtenir des informations individuelles et filtrées.

Dans cette section, nous pouvons avoir 3 indicateurs qui, en un coup d'œil, nous en disent déjà long :
Nouveaux regroupements des caractéristiques d'exploration
Nous pouvons désormais catégoriser les visites de Googlebot selon plusieurs dimensions d'exploration :
- Par réponse : Ainsi, nous connaîtrons les redirections et pages d'erreur que Googlebot a parcourues durant la période indiquée.
- Par type de fichier : Googlebot peut passer beaucoup de temps d'exploration sur des types de fichiers qui ne nous intéressent pas. Grâce à ce regroupement, nous le saurons.
- Par objectif : Nous pouvons ici distinguer entre le pourcentage d'exploration consacré aux pages qu'il connaissait déjà et à la découverte de nouvelles URL.
- Par type de bot Google : Nous savons que Google a différents types de bots et que chacun a sa propre fonction. Dans ce rapport, nous verrons à quelle fréquence chacun nous visite.
Vous pourrez approfondir chacun d'eux et voir quelques exemples d'URL. Cela dit, ce ne sont que cela — des exemples. Toutes les URL que vous voyez dans le rapport ne seront pas accessibles. Vous pouvez repérer des schémas, mais pas télécharger l'information complète et travailler à partir d'elle.

Conclusions sur l'outil
Il s'agit d'une amélioration qui aide grandement à détecter des problèmes d'exploration importants sur un site web, de manière simple et gratuite. Nous ne pensons pas qu'elle remplacera les outils d'analyse de logs comme Kibana ou Screaming Frog Log File Analyzer, car ce que Google nous propose est un échantillon, et non des données exactes. C'est pourquoi, pour des projets aux exigences particulières, elle ne peut pas être un remplacement. En résumé, nous pourrons résoudre de nombreux problèmes, mais pas analyser pleinement l'exploration que Google effectue sur notre site. Gardez à l'esprit qu'il s'agit d'une fonctionnalité qui vient d'être lancée et que, pour l'instant, nous ne savons pas comment elle évoluera.
Auteur : David Kaufmann

Cela fait plus de 10 ans que je suis totalement obsédé par le SEO — et honnêtement, je ne voudrais pas qu'il en soit autrement.
Ma carrière a franchi un cap lorsque j'ai travaillé comme Senior SEO Specialist pour Chess.com — l'un des 100 sites les plus visités de tout Internet. Opérer à cette échelle, sur des millions de pages, des dizaines de langues et dans l'une des SERPs les plus concurrentielles qui soient, m'a appris des choses qu'aucun cours ni aucune certification ne pourrait jamais transmettre. Cette expérience a transformé ma vision de ce qu'est réellement un SEO d'excellence — et elle est devenue le socle de tout ce que j'ai construit depuis.
Forcé par cette expérience, j'ai fondé SEO Alive — une agence pour les marques qui prennent la croissance organique au sérieux. Nous ne sommes pas là pour vendre des dashboards et des rapports mensuels. Nous sommes là pour bâtir des stratégies qui font vraiment la différence, en combinant le meilleur du SEO classique avec le nouvel univers passionnant de la Generative Engine Optimization (GEO) — afin que votre marque apparaisse non seulement dans les liens bleus de Google, mais aussi dans les réponses générées par l'AI que ChatGPT, Perplexity et Google AI Overviews livrent chaque jour à des millions de personnes.
Et parce que je ne trouvais aucun outil capable de gérer correctement ces deux mondes, j'en ai construit un moi-même — SEOcrawl, une plateforme d'intelligence SEO pour les entreprises qui réunit rankings, audits techniques, monitoring des backlinks, santé du crawl et suivi de la visibilité de marque dans l'AI, le tout au même endroit. C'est la plateforme dont j'ai toujours rêvé.
Découvrez plus de contenu de cet auteur

