クローキング
検索エンジンのランキング手法は数多くありますが、「ホワイトハットSEO」に含まれる良質で慎重なものと、「ブラックハットSEO」として知られる危険または悪質な手法とを区別できます。すべては、検索エンジンに対してウェブサイトでSEO専門家としてどれだけ透明で倫理的に対応するかにかかっています。今日、Googleのアルゴリズムはますます洗練され、騙すことがますます難しくなっているため、特定の倫理的でない手法は使われなくなっていきます。
そのうちの一つがクローキングとして知られており、何年も前に「ブーム」を迎えました。現在ではほとんど使われていませんが、私たちが管理するどのウェブサイトにも存在しないことを確認するために、これを理解することは不可欠です。
SEOにおけるクローキングとは？
クローキングは隠蔽の手法であり、その名前は英語で「覆い隠す」を意味する言葉に由来します。これは、ユーザーがウェブサイトのコンテンツをサーバーに要求した際に、同じウェブサイトから異なるコンテンツをユーザーとGooglebotに表示する手法です。
この手法は、よく知られたブラックハットSEO、つまりGoogleを欺くことでウェブサイトのランキングを向上させることを目的とした、欺瞞的で非倫理的な手法と戦略の集合に属します。
クローリングプロセスはどのようなものか？
クローキング戦略がどのように機能するかを理解するためには、ボットのクローリングプロセスがどのようなものかを知る必要があります。クローリングとインデックスのプロセスは、ウェブサイトを認識する役割を担うスパイダーによって実行されます。Googleのスパイダーはdeepbotとfreshbotという2つの異なるバージョンとともにGooglebotとして知られています。前者は、ウェブサイトのコンテンツに含まれるすべてのリンクを徹底的にたどり、サイトを訪問する役割を担います。後者は、ウェブ上の新しいコンテンツを探す役割を担います。
その起源は？
クローキングの起源は、検索結果でランクインするのが難しいビデオ、グラフィック、またはアニメーションコンテンツを持つウェブサイトにさかのぼることができ、この手法はこの不利を補うのに役立ちます。そのため、ボットの処理速度のために、画像やビデオのコンテンツを説明する完全なコンテンツのページがクローラーに表示されることが起こります。
クローキングプロセスはどのように機能するか？
この手法の目的は、検索エンジンを欺いて検索結果でのウェブサイトのランキングを向上させることです。これは非倫理的です。なぜなら、ユーザーに表示されるコンテンツは通常ポルノコンテンツやギャンブル（カジノなど）であり、Googleのロボットには大きく異なるコンテンツが表示されるからです。
一般的に、これは2つの異なる手法を通じて実行されます。
Agent name delivery：ウェブサイトへのアクセスは、物理的な人物からボットまでさまざまな「ユーザーエージェント」を通じて行われます。このため、サーバーはユーザーエージェントの種類に応じて表示するコンテンツを調整できます。クローキングは、サイトを訪れるユーザーの種類に基づいて異なるコンテンツが配信される際に発生します。
しばらく前は、「User agent switcher」プラグインを使用すると、Googlebotのユーザーエージェントでページを閲覧できました。これは、ユーザーやボットに表示されるコンテンツに違いがあるかどうかを確認するのに非常に便利です。
IP Delivery：ウェブサイトのコンテンツの配信が、クエリが行われたIPアドレスを考慮する場合。
この手法は、.htaccessファイルを変更することによって実行されます。たとえば、Apacheサーバーには「mod_rewrite」と呼ばれるモジュールがあり、この変更を可能にします。
他にもクローキングの手法はあるか？
厳密にはクローキングではありませんが、ボットがコンテンツをクロールするのを隠したり困難にしたりする手法もあります。これらはクローキングと見なすことができます：
-
隠しテキストまたは見えないテキスト：ユーザーから隠してより多くのキーワードや追加情報を含めるために使用されます。この情報はページの背景色と同じ色で「マスク」されます。
-
Flashウェブサイト：ご存知のように、SEOの推奨ガイドラインではFlashの使用は推奨されていません。検索エンジンはコンテンツを読むことができず、したがってランキングすることができません。
-
電子メール：送信者の名前もメールアドレスも指定されておらず、誰がメールを送信しているかが不明な場合に発生します。
-
大量のHTMLを持つウェブサイト：良いSEOは、検索エンジンでページをランクインさせるのに役立つ高いhtml/textの比率を推奨しています。しかし、そうでない場合、テキストが少なく比率が低くなります。これに対抗し、再設計を避けるために、クローキング手法が使用されてきました。
-
画像ギャラリー：画像を補うために、ウェブマスターはランキングに役立つキーワードを含めました。
-
ジオロケーション：場所に応じて異なるページを表示することで構成されます。これは、たとえば国によって異なるコンテンツを表示する多くのウェブサイトが行っているため、現在の戦術です。しかし、ユーザーやボットによって異なるコンテンツが表示される場合は、悪意のある手法となります。
-
CSSとJavaScriptを使用：GoogleはJavaScriptを解釈できないため、キーワードやリンクをウェブサイトに導入できます。関数を通じて、ユーザーのナビゲーションを邪魔せず、Googleには見出しHタグでのみ重要性が際立つようにプログラムできます。
-
リダイレクト：リダイレクトを通じて、検索結果をクリックしたユーザーを別のウェブサイトに送ります。これは「Redirect path」プラグインで簡単に確認できます。現在、これは欺いて議論を呼ぶコンテンツを提供するために依然として使用されているスパム手法です。
-
最新の手法は、SPA（Single Page Applications）の発展に従って考えることができます。これらのページはJavaScriptで開発されており、これがGoogleにもたらすレンダリングの困難さは、検索エンジンによって欺瞞の試みとして解釈される可能性があります。「Lighthouse」プラグインを使用すると、コンソールでウェブサイトのレンダリングプロセスを観察し、ブラウザがサイトをどのように処理できるかを見ることができ、また改善と機会の推奨事項を含む完全なレポートも生成できます。
2020年のクローキングの展望
この慣行は時代遅れであり、今日これを使用するとGoogleから厳しいペナルティを受ける可能性があります。何年も前は検索エンジンを欺くことができましたが、現在ではGoogleをユーザーに焦点を当て、検索意図に焦点を当てた質の高い検索結果を提供する、より自然で倫理的な検索エンジンにするすべてのアルゴリズム更新のため、ほぼ不可能です。
ブラックハットSEOの慣行は、それらを使用するサイトにペナルティを科す責任を持つウェブスパムチームによって追跡され、ペナルティを科され、ウェブサイト全体を検索結果から消すことさえあります。したがって、この手法は完全に一時的な結果しかもたらしません。
参考資料：
-
Cyberclick:* "What is Cloaking?"*
-
Luis Villanueva: "What is Cloaking?"
-
Ionos: "What is Cloaking and why should you avoid it?"
-
We live security: "What is Cloaking?"
-
Iebschool: "What is concealment or Cloaking SEO?"
-
Sistrix: "What is Cloaking?"
-
Catchupdates: "What is Cloaking in SEO & Should You Do Cloaking?"
-
Search Engine Journal: "What is Cloaking & Is All Cloaking Evil?"
著者: David Kaufmann
私はこの10年以上、SEOに完全に夢中になって過ごしてきました。正直なところ、他の生き方は考えられません。
私のキャリアが新たな次元に到達したのは、Chess.com でシニアSEOスペシャリストとして働いたときでした。Chess.com はインターネット全体で最も訪問数の多い上位100サイトの1つです。数百万ページ、数十言語、そして最も競争の激しい SERPs の1つという規模で仕事をした経験は、どんなコースや資格でも得られないことを教えてくれました。あの経験は、本当に優れたSEOとは何かという私の視点を一変させ、それ以降に私が築いてきたすべての土台となりました。
その経験から、私は SEO Alive を創業しました。オーガニック成長に本気で取り組むブランドのためのエージェンシーです。私たちは dashboards や月次レポートを売るためにここにいるのではありません。本当に成果を動かす戦略を構築するためにここにいます。クラシカルなSEOの最良の部分と、Generative Engine Optimization (GEO) というエキサイティングな新しい世界を組み合わせ、あなたのブランドが Google の青いリンクだけでなく、ChatGPT、Perplexity、Google AI Overviews が毎日何百万人もの人々に届けている AI 生成の回答の中にも確実に表示されるようにします。
そして、この両方の世界をきちんと扱えるツールが見つからなかったので、自分で作りました。それが SEOcrawl です。rankings、テクニカル監査、backlinks モニタリング、crawl ヘルス、そして AI ブランド可視性トラッキングを1つの場所に統合した、エンタープライズ向けのSEOインテリジェンスプラットフォームです。まさに、ずっと存在してほしいと願っていたプラットフォームです。
この著者の他のコンテンツをご覧ください
