Google Search Consoleの新しいクロール統計レポート
2020年11月下旬、Googleは刷新したクロール統計レポートを再リリースし、テクニカルSEOの世界に大きな衝撃を与えたようです。現在は Crawl Stats（クロール統計） と呼ばれており、これによってGoogleの各種ボットがどのようにサイトを訪問しているかを学び、有益なインサイトを得ることができます。
Google Crawl Statsとは？
これは 以前の旧版ウェブマスターツールにあった「クロール統計」セクションを徹底的に刷新したもの です。これにより、Googlebotのウェブサイトに対するクロール履歴に関するさまざまなデータや統計にアクセスできます。新バージョンでは、ある程度ログを扱うためのツールへと進化しており、もはや単なる可視化チャートではありません。
このレポートは、Search Consoleアカウントの 設定 > クロールの統計情報 からアクセスできます。
刷新されたレポートの新機能
いくつかの新機能が追加されています：
- ボットリクエストの総数のグループ化：レスポンスコード、クロールされたファイルの種類、クロールの目的、Googlebotのタイプ別に分類されています。これらのいくつかは非常に役立つはずです。
- ホストステータス に関する詳細情報。
- サイト上のどこで各リクエストが発生したかを示す URLの例。
- 複数ホストを持つプロパティの完全な概要 とドメインプロパティのサポート。
Googleのログ分析ツールのセクション
Crawl Statsのさまざまなセクションを巡る旅にご招待します。ご一緒しませんか？
クロール統計チャート
新しいデザインに合わせて改変されたこのチャートは、時間の経過に沿ったクロール統計を表示します。3つの指標を確認できます：
- 期間内の クロールリクエストの総数、またはチャートにカーソルを合わせると日次で表示されます。
- ダウンロードされた データの合計サイズ（バイト単位）。
- 平均レスポンス時間（ミリ秒単位）。
ここまではあまり目新しいものはなく、インターフェースの変更といったところです。しかし、次のセクションを見てみましょう…
ドメインプロパティ内の各種ホストのクロール
Search Consoleのドメインプロパティは、wwwあり・なしのバージョンや、保有するサブドメインなど、複数のホストで構成されている場合があります。このチャートでは、Googlebotがそれらをどのようにクロールしているかを確認でき、各ホストをクリックして個別にフィルタリングされた情報を取得できます。
このセクションでは、一目で多くのことを示してくれる3つのインジケーターがあります：
クロール特性の新しいグループ化
Googlebotの訪問を、いくつかのクロール次元で分類できるようになりました：
- レスポンス別：これにより、指定期間中にGooglebotが通過したリダイレクトやエラーページがわかります。
- ファイルタイプ別：Googlebotは、私たちが気にしないファイルタイプにクロール時間を多く費やしている可能性があります。このグループ化のおかげでそれを把握できます。
- 目的別：すでに認識しているページのクロールと、新しいURLの発見のクロールの割合を区別できます。
- Googleボットのタイプ別：Googleにはさまざまな種類のボットがあり、それぞれ独自の機能を持っています。このレポートでは、各ボットがどの程度の頻度で訪問しているかがわかります。
各項目を掘り下げ、いくつかのURLの例を見ることができます。ただし、それらはあくまで例にすぎません。レポートに表示されるすべてのURLが利用可能というわけではありません。パターンを発見することはできますが、完全な情報をダウンロードしてそれを基に作業することはできません。
ツールに関する結論
これは、ウェブサイトの 重大なクロール問題をシンプルかつ無料で検出するのに大いに役立つ 改善です。KibanaやScreaming Frog Log File Analyzerのようなログ分析ツールに取って代わるとは思いません。なぜなら、Googleが私たちに提供するのはサンプル であり、正確なデータではないからです。そのため、特別な要件のあるプロジェクトでは代替にはなりません。要するに、多くの問題を解決できますが、Googleが私たちのウェブサイトに対して行うクロールを完全に分析することはできません。これはリリースされたばかりの機能であり、現時点ではどのように進化していくかわからないことに留意してください。
著者: David Kaufmann
私はこの10年以上、SEOに完全に夢中になって過ごしてきました。正直なところ、他の生き方は考えられません。
私のキャリアが新たな次元に到達したのは、Chess.com でシニアSEOスペシャリストとして働いたときでした。Chess.com はインターネット全体で最も訪問数の多い上位100サイトの1つです。数百万ページ、数十言語、そして最も競争の激しい SERPs の1つという規模で仕事をした経験は、どんなコースや資格でも得られないことを教えてくれました。あの経験は、本当に優れたSEOとは何かという私の視点を一変させ、それ以降に私が築いてきたすべての土台となりました。
その経験から、私は SEO Alive を創業しました。オーガニック成長に本気で取り組むブランドのためのエージェンシーです。私たちは dashboards や月次レポートを売るためにここにいるのではありません。本当に成果を動かす戦略を構築するためにここにいます。クラシカルなSEOの最良の部分と、Generative Engine Optimization (GEO) というエキサイティングな新しい世界を組み合わせ、あなたのブランドが Google の青いリンクだけでなく、ChatGPT、Perplexity、Google AI Overviews が毎日何百万人もの人々に届けている AI 生成の回答の中にも確実に表示されるようにします。
そして、この両方の世界をきちんと扱えるツールが見つからなかったので、自分で作りました。それが SEOcrawl です。rankings、テクニカル監査、backlinks モニタリング、crawl ヘルス、そして AI ブランド可視性トラッキングを1つの場所に統合した、エンタープライズ向けのSEOインテリジェンスプラットフォームです。まさに、ずっと存在してほしいと願っていたプラットフォームです。
この著者の他のコンテンツをご覧ください
