Cara menemukan sitemap sebuah website

Apa itu Sitemap?

Sebuah XML sitemap adalah daftar halaman pada sebuah website yang bertujuan untuk membantu berbagai mesin pencari. Sitemap menyediakan informasi penting tentang URL di website Anda termasuk halaman, video, gambar, file, dan apa hubungannya. Selain halaman, XML sitemap juga menyertakan metadata tambahan tentang setiap URL:

• ›tanggal terakhir diperbarui- seberapa sering berubah dan - prioritasnya dibandingkan dengan halaman lain.

Dalam hal praktik terbaik SEO, sitemap harus dioptimalkan agar hanya berisi konten yang dapat diindeks dan berkualitas. Setiap halaman yang rusak (404), melakukan pengalihan, atau duplikat di dalamnya dapat membingungkan mesin pencari.

Sitemap ibarat kerangka sebuah website. Sitemap dibuat dalam format kode dan biasanya terlihat seperti ini:

Atau seperti ini:

Mengapa Anda Perlu Menemukan Sitemap?

Kami sudah membahas dasar-dasar sitemap, termasuk tujuan utamanya. Sekarang mari kita lihat mengapa kita ingin menemukan file-file ini sejak awal.

Seperti yang sudah dibahas di atas, sitemap adalah cara yang tak tergantikan dan sederhana untuk memberi tahu mesin pencari dan khususnya crawler mereka (mis. Googlebot) tentang konten penting di website kita.

Pertama-tama, Anda mungkin ingin memeriksa apakah Anda memiliki XML sitemap atau tidak. Jika Anda punya, langkah berikutnya adalah memeriksanya dan melihat apakah sitemap sudah dibuat dengan benar dan berisi informasi yang tepat.

Terakhir, jika Anda tidak memiliki sitemap, Anda mungkin ingin membuatnya dan mengirimkannya ke mesin pencari. Perhatikan bahwa XML sitemap sama sekali tidak wajib. Namun, sitemap membantu crawler pencarian menemukan, mengindeks, dan pada akhirnya memberi peringkat pada website dan halaman baru dengan cara yang lebih cepat.

Sekarang saatnya menyelami pekerjaan detektif dan menemukan sitemap-sitemap itu!

Siap? Ayo mulai!

Cara Sederhana untuk Menemukan Sitemap Anda

Mari kita mulai perjalanan dengan beberapa cara termudah untuk menemukan sitemap sebuah website.

1) Periksa Secara Manual Lokasi XML Sitemap yang Umum

Salah satu cara paling umum (dan sederhana) untuk menemukan XML sitemap sebuah website adalah dengan memeriksa secara manual beberapa lokasi standar. Ini sangat sederhana dan yang perlu Anda lakukan adalah memasukkan URL website Anda di browser dan kemudian mencoba beberapa variasi berbeda. Mari saya tunjukkan:

• ›www.YourWebsiteUrl.com/**sitemap.xml**

Ini adalah lokasi paling populer, tetapi bukan satu-satunya. Oleh karena itu, jika kita tidak beruntung pada percobaan pertama, berikut beberapa pemeriksaan cepat lainnya untuk dicoba:

• ›/sitemap_index.xml (yang merupakan indeks dari semua sitemap jika sebuah website memiliki lebih dari satu).

Ini adalah kasus dengan XML sitemap kami sendiri di blog ini. Mari saya tunjukkan:

Dan inilah tampilannya:

Pada dasarnya, ini semua adalah sitemap-sitemap terpisah yang dibagi berdasarkan jenis postingan di dalamnya.

Sekarang, jika kita masih belum beruntung, mari kita coba beberapa opsi lainnya:

• ›/sitemap-index.xml- /sitemap.php- /sitemap.txt- /sitemap.xml.gz- /sitemap/- /sitemap/sitemap.xml- /sitemapindex.xml- /sitemap/index.xml- /sitemap1.xml

Catatan: File XML hanyalah salah satu cara untuk mendeskripsikan sitemap. Ada juga format RSS dan Atom.

Oleh karena itu, kita perlu menambahkan beberapa kemungkinan lokasi sitemap lagi:

• ›/rss/- /rss.xml- /atom.xml

Kita akan membahasnya lebih lanjut nanti.

Sekadar konfirmasi- kita harus meletakkan nama domain website sebelum tanda "/" saat mencoba berbagai alternatif.

2) Periksa File Robots.txt

Jika Anda masih bersama kami, itu berarti Anda gagal menemukan file yang menjadi tujuan utama artikel kami atau Anda hanya penasaran dan bersemangat untuk belajar lebih banyak.

Sebenarnya, apa pun alasan persisnya, saya punya kabar baik untuk Anda - Kita akan melanjutkan perjalanan dengan tips yang sangat sederhana lainnya.

Robots.txt adalah file khusus yang dikenal oleh SEO (dan juga programmer) yang menyediakan direktif yang berguna untuk crawler mesin pencari. Lebih dari itu, ini juga tempat di mana Anda sering kali dapat menemukan tautan ke sitemap sebuah website.

Idenya adalah bahwa ketika mesin pencari mengunjungi file robots.txt ini, menambahkan tautan ke sitemap di sana sangat masuk akal. Dengan begitu, akan lebih mudah bagi mereka untuk mendeteksi sitemap sejak awal dan meng-crawl website.

Siap untuk kabar baik lainnya?! Inilah dia- untuk mengakses file robots.txt sebuah website Anda hanya perlu menambahkan /robots.txt ke nama domain Anda di browser dan tekan "Enter". Ini mirip dengan langkah sebelumnya di mana kita menambahkan berbagai kemungkinan rute sitemap.

Apa yang lebih baik daripada contoh nyata? Lihat alamat URL dari file robots.txt kami sendiri:

https://seocrawl.com/robots.txt

Ini adalah file kecil tetapi sederhana dan berguna dengan beberapa fungsi penting. Jika Anda sudah membukanya, Anda akan dapat melihat hampir seketika permata kecil yang Anda cari- file sitemap:

Voilà! Saya berjanji itu akan mudah :)

3) Periksa Google Search Console

Oke, sitemap masih belum ditemukan? Tidak masalah! Kami punya lebih banyak tips yang akan membantu kita menemukan jalan.

Mari saya tunjukkan cara mudah dan cepat lainnya.

Google Search Console (juga dikenal sebagai Webmaster Tools di masa lalu) adalah tempat lain untuk menemukan jalur yang kita cari. Tentu saja, agar ini memungkinkan, Anda harus menjadi pemilik website atau telah diberi akses.

Jika Anda memenuhi salah satu kriteria ini, langkah berikutnya adalah masuk ke GSC dan dari menu di sebelah kiri pilih Sitemaps:

Sekarang, jika sitemap (atau sitemap-sitemap) sudah dikirimkan oleh orang lain di masa lalu, Anda akan dapat langsung melihatnya:

Selain alamat URL sitemap yang tepat, ada informasi tambahan seperti jenis sitemap (file indeks yang berisi sitemap lain di dalamnya atau sitemap biasa dengan halaman-halaman website), kapan dikirimkan, terakhir dibaca, status, dan berapa banyak URL yang ada di dalamnya.

TIPS: Jika Anda serius tentang SEO dan meningkatkan kinerja organik website, Google Search Console adalah alat yang wajib dimiliki. Wawasan yang bisa Anda dapatkan darinya sangat banyak.

Ditambah lagi, bonus tambahannya adalah memiliki GSC memungkinkan Anda mencoba alat kami yang kuat- SEOcrawl

4) Periksa Bing Webmaster Tools

Kabar baiknya adalah Bing Webmaster Tools bekerja hampir sama dengan Google Search Console. Tidak mengherankan yang terakhir dulu disebut Google Webmaster Tools karena keduanya memiliki banyak kesamaan.

Sekali lagi, Anda perlu masuk dan kemudian menavigasi ke sidebar kiri, di mana Anda akan memiliki bagian "Sitemaps" yang tersedia.

Klik pada itu, dan jika ada sitemap/sitemap-sitemap yang sudah dikirimkan, Anda akan dapat mengeksplorasinya lebih jauh.

Cara Lanjutan untuk Menemukan Sitemap Anda

Masih bersama kami? Oke, itu berarti Anda masih mencari lokasi file sitemap yang berharga itu, atau Anda sangat berani untuk memasuki bagian lanjutan. Dalam kedua kasus tersebut, saya ingin mengucapkan selamat kepada Anda karena telah mencapai sejauh ini dan mendoakan keberuntungan :)

Saya berjanji ini tidak akan terlalu rumit dan menakutkan! Ayo mulai!

5) Gunakan Operator Pencarian Google

Operator pencarian Google (juga dikenal sebagai command) bisa sangat ampuh untuk berbagai tujuan SEO (mis. menemukan peluang link building, ide konten, menemukan masalah teknis, dan banyak lagi). Namun, dalam hal ini, kita akan menggunakannya untuk menemukan XML sitemap dari website yang sedang kita periksa.

Untuk itu, kita perlu memanfaatkan command "filetype:". Ini bisa sangat berguna ketika kita menggabungkannya dengan command "site:". Pada dasarnya, kombinasi keduanya akan mencari jenis file tertentu hanya di website yang kita inginkan.

Contoh: site:chess.com filetype:xml

Dan inilah yang akan dihasilkan pencarian ini di Google:

Ini dia! Semua sitemap yang terindeks dari website ditampilkan di Google dan kita dapat mengeksplorasinya lebih lanjut.

Jika ada beberapa hasil yang tidak relevan yang muncul, Anda dapat menyempurnakan pencarian Anda lebih jauh. Kali ini kita akan menambahkan operator "inurl" ke arsenal kita.

Sebagai contoh: site:uefa.com filetype:xml inurl:sitemap

Catatan: seperti yang kami sebutkan di atas sitemap juga bisa berupa file teks. Untuk menemukannya, kita dapat melakukan pencarian serupa tetapi dengan ekstensi yang berbeda.

Sebagai contoh: site:WebsiteURL inurl:sitemap filetype:txt

Dan ini akan menghasilkan berikut:

TIPS: Perintah-perintah ini akan mengungkap lokasi sitemap hanya jika diindeks oleh Google. Beberapa plugin WP yang membuat sitemap secara otomatis menambahkan tag no follow, no index ke Sitemap. Jadi, jika Anda berakhir tanpa hasil yang ditemukan, jangan khawatir!

Mari kita lanjutkan dengan ide berikutnya.

6) Gunakan Alat Online

Teknik lain adalah mencoba dengan alat online seperti SEO Site Checkup di mana Anda hanya perlu menempelkan URL website Anda dan menekan Checkup. Kemudian Anda akan mendapatkan sesuatu seperti ini:Catatan: Cara alat ini bekerja adalah dengan memeriksa lokasi sitemap standar yang kami sebutkan sebelumnya (sitemap.xml, sitemap1.xml, sitemapindex.xml dan seterusnya). Oleh karena itu, mungkin tidak menemukan website Anda dalam kasus-kasus spesifik lainnya.

7) Periksa CMS dari Website

Tergantung pada content management system yang digunakan website, XML sitemap mungkin berada di tempat yang berbeda. Kabar baiknya adalah CMS yang paling populer memiliki lokasi default yang mungkin ingin Anda mulai pencarian Anda.

Pertama, kita perlu mengidentifikasi CMS dari website. Ini adalah proses yang cukup sederhana dan kita dapat menggunakan alat online maupun ekstensi browser.

Sebagai contoh, salah satu addon yang berguna adalah Built With yang mengidentifikasi tidak hanya CMS tetapi juga banyak software dan program lain yang digunakan website. Berikut tampilan info yang Anda cari:

Jika Anda lebih suka alat online, salah satu solusi yang mungkin adalah WhatCMS:

Alternatifnya adalah CMS Detect:

Sekarang, ketika kita mengetahui CMS yang tepat, mari kita eksplorasi beberapa content management system yang paling populer dan di mana mereka biasanya menyimpan file XML.

Wordpress

Sebelum 2020, cara sitemap dibuat terutama melalui plugin. Namun, saat ini, dengan fungsionalitas bawaan WP, sitemap harus berada di /wp-sitemap.xml.

Namun demikian, jika website yang Anda periksa menggunakan plugin untuk pembuatan sitemap, Anda dapat mencoba dengan beberapa lokasi berikut:

• ›/sitemap.xml- /tag-sitemap.xml- /sitemap_index/xml- /category-sitemap.xml

Alternatifnya, Anda dapat memeriksa pengaturan plugin dan menemukan jalurnya di sana.

Wix, Shopify, Joomla, Squarespace, Magento

Kabar baiknya adalah semua ini secara otomatis menghasilkan XML sitemap untuk pengguna mereka. Oleh karena itu, lokasi default (jika tidak dimodifikasi lebih lanjut) adalah: /sitemap.xml

Dengan catatan bahwa nama domain diletakkan sebelum bagian "/".

BONUS: Bookmarklet untuk Penemuan Sitemap.xml Secara Instan

Jika Anda adalah penggemar produktivitas dan menghemat waktu dari setiap tugas kecil (bukankah kita semua SEO seperti itu?!), maka Anda mungkin menemukan bookmarklet cepat yang berguna untuk memeriksa XML sitemap sebuah website secara instan.

Anda hanya perlu menambahkan kode javascript ini:

javascript:void(location.href='http://' + location.host + '/sitemap.xml')

Bookmark dan setiap kali Anda mengklik akan membuka file Sitemap jika terletak di lokasi default /sitemap.xml.

Cepat dan mudah!

Menemukan Jenis Sitemap Lainnya

Kita berbicara terutama tentang XML sitemap karena merupakan format yang paling umum untuk menunjukkan kepada crawler apa yang terjadi di domain Anda. Namun, patut disebutkan jenis lainnya yang juga dapat ditemukan di beberapa website.

• ›HTML. Ini biasanya dibuat untuk memudahkan pengguna dan sangat membantu terutama untuk website yang lebih besar.

Sebagai contoh, Ebay memberikan pengunjung mereka "peta" virtual dengan halaman utama dan kategori: https://pages.ebay.com/sitemap.html

• ›

  RSS. Dalam beberapa kasus website menggunakan umpan RSS sebagai sitemap yang biasanya terletak di: /rss/ atau /rss.xml.

• ›

  Atom. Hal yang sama berlaku untuk umpan Atom dan Anda biasanya dapat menemukannya sebagai: /atom.xml- TXT. Ini adalah file teks standar seperti yang telah kita bahas sebagai salah satu contoh. Lokasi: /sitemap.txt

Tidak Ada Sitemap? Apa yang Harus Dilakukan Dalam Kasus Ini?

Setelah membahas berbagai opsi untuk menemukan sitemap, ada baiknya untuk mengatakan beberapa kata tentang apa yang harus dilakukan jika tidak ada sitemap yang sudah dibuat. Ini akan menjadi kasus dengan sebagian besar website yang benar-benar baru yang telah online untuk waktu yang singkat. Atau beberapa situs yang sangat kecil dan mungil.

Juga, perhatikan bahwa tidak semua website membutuhkan sitemap. Jika website hanya memiliki beberapa halaman, Anda akan baik-baik saja bahkan tanpa sitemap.

Namun, jika Anda bersedia membuat XML sitemap Anda, Anda dapat dengan mudah menggunakan plugin yang kompatibel dengan sistem CMS Anda. Beberapa contoh yang baik untuk WP adalah:

• ›Rank Math Sitemap Plugin- WP Sitemap Plugin- Google XML Sitemaps- WordPress SEO by Yoast

Alternatifnya, Anda dapat membuat sitemap secara manual atau menggunakan crawler untuk menjelajahi website Anda dan mengekspor sitemap untuk diunggah.

Sebagai Rangkuman:

Saya harap tips ini membantu Anda untuk menyelam lebih dalam ke dunia Sitemap dan Anda sekarang lebih akrab dengan bagaimana cara kerjanya, mengapa kita membutuhkannya… dan tentu saja bagaimana cara menemukannya.

Beri tahu kami di komentar jika ada hal lain yang ingin Anda ketahui atau hanya untuk berbagi pengalaman Anda :)

Semoga berhasil!