인덱싱: 무엇이며 Google은 페이지를 어떻게 인덱싱할까?

SEO에서의 중요성

인덱싱과 SEO의 관계는 처음 보이는 것보다 더 복잡합니다.

먼저, 검색 결과에서 순위 목표를 달성하려면 URL이 반드시 인덱싱되어야 합니다. 페이지를 아무리 잘 최적화하더라도 인덱싱되지 않으면 검색 엔진에서 어떤 방문도 받지 못합니다.

반면 페이지가 인덱싱되는 순간 순위 위치가 할당됩니다. 정확한 위치는 그 시점까지 작업한 SEO 요소 (온페이지 및 오프페이지)의 나머지에 따라 달라집니다.

이러한 요소에 우리가 다소 통제할 수 있는 다른 요소를 추가할 수 있는데, 이는 각각에 따라 다릅니다. 이는 다음을 의미합니다:

• ›

  사이트의 연식

• ›

  인덱싱이 필요한 URL의 게시 속도

• ›

  기존 경쟁 등.

또한 양적 수준에서의 인덱싱도 페이지의 SEO 순위에 영향을 미칩니다. 도메인이 더 많은 URL을 인덱싱할수록 경쟁사에 비해 검색 엔진에서 더 많은 무게를 얻습니다. 물론 이러한 URL이 고품질일 경우에 한해서이며 — 양뿐만 아니라 품질도 중요하다는 점은 당연합니다.

인덱싱된 페이지를 알아내는 방법

얼마나 많은, 어떤 페이지가 인덱싱되었는지 알 수 있는 여러 방법이 있습니다. 아래에서는 가장 유용한 두 가지를 식별합니다:

Search Console

Google Search Console은 인덱싱된 페이지를 보는 것뿐만 아니라 웹사이트의 다른 SEO 매개변수를 제어하고 관리하는 데 가장 널리 사용되는 도구일 것입니다.

Index 섹션에서 우리는 웹사이트의 인덱싱과 관련된 필요한 모든 정보를 가지고 있습니다.

Coverage 보고서는 인덱싱된 페이지의 이력을 제공하며, 오류가 있는 페이지, 검증된 페이지, 제외된 페이지를 표시하고 비교할 수 있는 가능성을 제공합니다.

Site 명령어

웹 페이지의 실시간 인덱싱을 확인하는 빠른 방법은 "site:" 명령어입니다.

검색 엔진 자체에서 사용해야 하며, site:mydomain.com을 입력합니다. 그러면 검색 결과에 인덱싱된 URL의 수와 모든 URL 목록이 모두 표시됩니다.

Search Console의 결과와 site 명령어를 통해 얻은 결과 사이에 약간의 차이가 있는 것은 정상입니다. 일반적으로 각각이 데이터를 수집한 시점 때문에 발생합니다.

웹 콘텐츠를 인덱싱하는 방법

이상적인 상황은 URL이 게시되면 자동으로 인덱싱되는 것입니다. 그러나 현실은 그렇게 호의적이지 않습니다.

실제로 일어나는 일은 Google(다른 검색 엔진과 마찬가지)이 인터넷 전반에 걸쳐 여러 크롤링 로봇을 사용하여 기존 URL, 안정적으로 유지되는 URL, 수정된 URL, 사라진 URL, 그리고 새로운 URL을 식별한다는 것입니다.

새로운 URL을 감지하고 웹사이트가 로봇의 접근을 용이하게 하기 위해 필요한 모든 것을 최적화했다면, URL을 분석하고 기본 조건을 충족하면 인덱싱하여 검색 결과에 게시할 수 있도록 합니다.

언급했듯이 이것은 우리가 원하는 속도로 일어나지 않습니다. 새 URL의 인덱싱을 가속화하려면 다음을 할 수 있습니다:

• ›

  웹사이트에서 트래픽이 많은 콘텐츠를 사용하여 해당 페이지에 내부 링크를 추가하여 크롤링 및 인덱싱을 개선합니다

• ›

  이미 언급한 사이트맵을 사용합니다

• ›

  Google Search Console 도구의 "URL 검사"를 사용합니다

그런 다음 "색인 생성 요청"을 통해 인덱싱을 강제할 수 있습니다

• ›

  Twitter, Facebook 등 소셜 프로필에서의 멘션을 통해. 이 방법은 예전에는 더 효과적이었지만, 콘텐츠로 방문을 생성하는 사용자가 상당히 많다면 일반적으로 잘 작동합니다.

• ›

  인덱싱 프로그램을 통해, 시장에는 여러 가지가 있으며 일부는 무료이고 대부분은 유료입니다. 일반적으로 온라인으로 작동하며 대량 URL 인덱싱에 일반적으로 유용하지만, 개인적으로는 다른 방법을 권장합니다.

모든 콘텐츠를 인덱싱해야 합니까?

온라인 콘텐츠의 100%가 인덱싱 가능하다고 생각할 수 있고, 더욱이 모든 면에서 우리에게 이익이 된다고 생각할 수 있습니다. 그러나 그렇지 않습니다.

웹사이트의 모든 요소를 인덱싱하면 중복 콘텐츠, 가치 없는 페이지의 인덱싱 등이 존재할 수 있습니다. 그렇기 때문에 인덱싱 한도를 설정하는 것이 중요합니다.

이러한 이유로 태그, 법적 페이지, 필터, 내부 검색 결과 등과 관련된 많은 URL은 이 인덱싱에서 제외되며, 나머지는 유효한 방식으로 인덱싱됩니다.

사이트맵과 인덱싱

사이트맵은 웹 페이지 인덱싱의 초석을 나타냅니다. 검색 로봇과 웹사이트 간의 통신에서 매개체 역할을 하는 파일이며, 어떤 URL이 인덱싱 가능한지, 웹 구조에서 어떻게 구성되어 있는지, 마지막 업데이트 날짜를 알려줍니다.

인덱싱 개선을 위한 사용 방법

사이트맵을 만드는 여러 가지 방법이 있습니다. 오늘날 가장 쉬운 방법은 이 옵션을 포함하는 SEO 최적화 및 관리 플러그인을 활용하는 것입니다.

사이트맵을 만들고 일반적으로 mydomain.com/sitemap.xml 구조로 도메인에 게시할 수 있도록 해야 합니다.

사이트맵을 통해 더 나은 인덱싱을 보장하고 싶다면 Google Search Console에 도메인을 등록하면 Index 섹션에 Sitemap 섹션이 있는 것을 볼 수 있습니다. 사이트맵 주소를 포함하면 이제부터 Google이 파일에 더 잘 접근하고 URL을 더 빠르게 인덱싱하며, 이 온라인 도구에서 모든 인덱싱 진화를 모니터링할 수 있습니다.

URL을 어떻게 deindex합니까

URL을 deindex하기 위해 사이트맵을 사용하는 또 다른 방법이 있는데, 이것이 이 요소의 개념 자체에 역효과를 낼 수 있는 것처럼 보일 수 있지만 매우 유용합니다. deindex하려는 URL 세트에 noindex 태그를 추가하고 이러한 URL만 사이트맵에 업로드하는 것입니다. 이 방법으로 Google이 더 빨리 크롤링하도록 강제하고 noindex 태그를 보면 deindex하도록 합니다.

추천 글 -> Google에서 URL을 deindex하는 방법

Search Console을 통해

Google Search Console에서 Google에 URL을 deindex 요청할 수 있습니다. 이를 위해 Index 섹션과 URL 제거 섹션에 액세스해야 합니다. 여러 옵션이 있으며, 긴급 콘텐츠 제거가 가장 권장됩니다.

새 요청을 만들고 deindex하려는 URL을 포함시키면 Google이 가능한 한 빨리 프로세스를 수행하기 위해 이를 고려할 것입니다.

Noindex 디렉티브

특정 URL이나 전체 섹션이 인덱싱되지 않기를 원한다면, noindex 디렉티브를 사용하여 Google에 웹사이트를 크롤링할 때마다 이를 고려하지 않도록 알려줍니다.

확인하셨듯이 인덱싱은 SEO 순위에 근본적인 역할을 하며, 사이트의 인덱싱 상태를 모니터링하고 웹사이트를 구성하는 다양한 페이지에 필요한 처리를 제공하는 것이 권장됩니다.