Googlebot Evergreen: Crawler Baru dari Google

Dunia SEO memiliki alasan untuk merayakan berkat artikel terbaru yang diterbitkan oleh tim Google Webmasters, yang mengumumkan bahwa versi baru dari Googlebot mereka, yang disebut GoogleBot Evergreen, juga akan tersedia untuk alat webmaster.
Di bawah ini, kita akan melihat implikasi yang dimilikinya pada tingkat implementasi teknis dari perspektif SEO.
1) Apa itu GoogleBot Evergreen?
Sampai saat ini, Bot (crawler) Google menggunakan Google Chrome 41 untuk menganalisis semua situs web di Internet. Mengingat bahwa Google Chrome sekarang sudah pada versi 78, Anda dapat membayangkan seberapa jauh GoogleBot tertinggal dibandingkan dengan browsernya. Namun, pada acara Google I/O baru-baru ini, mereka mengumumkan banyak perbaikan dalam hal ini. Yang utama adalah, sejak saat itu, tidak hanya GoogleBot akan menggunakan versi baru Chrome, tetapi pembaruannya akan dihubungkan sehingga selalu menggunakan versi terbaru.

Google mengumumkan engine rendering barunya: GoogleBot Evergreen
Di bawah ini, Anda dapat menonton video dari tim Search, di mana mereka membuat pengumuman besar GoogleBot Evergreen dan juga membahas statistik tentang dunia SEO dan rencana Google untuk proyek-proyek mendatang dan perbaikan pada tahun 2019.
Ini adalah video selama 40 menit tetapi benar-benar layak untuk ditonton. Pertama, karena menampilkan apa yang mungkin merupakan 2 dari pakar SEO terbesar di Google, dan kedua, karena mereka fokus pada evolusi dunia SEO dan bagaimana kita dapat beradaptasi untuk menyajikan konten terbaik kepada pengguna.
2) Implikasi
Perubahan mendasar dan paling penting dalam beralih dari Chrome 41 ke Chromium (versi terbaru) adalah mulai sekarang, GoogleBot dapat menjalankan Javascript dan me-render halaman. Sampai sekarang, proses ini jauh lebih lambat atau bahkan tidak mungkin kecuali alat tertentu digunakan untuk membuat halaman statis untuk bot (Prerender.io, Puppeteer...) jika situs dibangun dengan perangkat lunak JavaScript modern (Vue...). Namun, dengan perbaikan ini, Google akan dapat memahami lebih banyak situs yang sebelumnya tidak dapat diakses.
Pada gambar berikut, Anda dapat melihat bagaimana GoogleBot lama dengan Chrome 41 memahami sebuah situs dan bagaimana ia memproses konten dengan versi baru.

Contoh bagaimana GoogleBot melihat sebuah halaman sebelum dan sesudah perubahan.
Untuk perusahaan besar dengan tim teknis yang luas, ini bukan masalah besar karena mereka dapat mengalokasikan sumber daya yang diperlukan. Namun, untuk usaha kecil dan menengah, ini bisa menjadi sakit kepala yang nyata. Itulah mengapa perubahan ini dapat membantu banyak perusahaan memastikan konten mereka dapat dirayapi dan diindeks dengan benar.
Sekarang, jika Anda berpikir tentang situs Anda dan bertanya bagaimana hal itu dapat memengaruhi Anda, perhatikan bahwa menurut tim Google sendiri, jawabannya adalah "tidak akan," karena pada prinsipnya perubahannya bahkan tidak boleh terlihat. Mengapa?
- Teknologi ini telah diuji secara menyeluruh.
- Analisis telah dilakukan selama beberapa bulan di banyak situs web.
- User-agent tidak akan diubah tanpa pemberitahuan terlebih dahulu untuk menghindari merusak skema pelacakan/pencatatan Anda...
Salah satu perubahan besar yang diumumkan minggu ini adalah bahwa engine rendering baru ini juga telah diterapkan pada alat SEO untuk Webmaster sehingga semua profesional SEO dapat melakukan semua jenis pengujian dan analisis:
3) Mobile First Index
Berita utama lain yang muncul bersamaan dengan pengumuman GoogleBot Evergreen adalah pengumuman perubahan terkait dunia Mobile.

Mungkin, pada akhir 2019, semua situs web di Internet akan dirayapi melalui GoogleBot Mobile.
Tim Pencarian Google mengungkapkan beberapa statistik yang sangat berdampak:
- Lebih dari 50% situs web sedang dianalisis dengan GoogleBot Mobile.
- Pada akhir 2019 atau awal 2020, Google dapat menganalisis 100% Internet dengan GoogleBot Mobile.
- GoogleBot merayapi +130 triliun halaman.
- Kecepatan situs Anda di perangkat seluler adalah faktor peringkat dan memiliki dampak langsung pada konversi, waktu di halaman, dan faktor kritis lainnya untuk bisnis apa pun.
4) Pembaruan
Karena ini adalah topik yang terus berubah, kami telah membuat bagian ini untuk menerbitkan semua berita yang terkait dengan engine Google.
2 Oktober 2019: Google mengumumkan bahwa mulai Desember 2019, user-agent GoogleBot akan disesuaikan untuk mencerminkan versi terbaru browser dan akan diperbarui sesuai dengan versi terbaru Chrome.
Berikut adalah user-agent saat ini:
- Mobile:
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
- Desktop
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) Mulai Desember, namun, user-agent baru akan menjadi sebagai berikut:
- Mobile
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
- Desktop
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html) ** Simbol "W.X.Y.Z" akan diganti dengan versi Google Chrome saat dirilis. *
Apakah Anda memiliki pertanyaan, keraguan, atau saran tentang apa yang baru saja Anda baca? Kami akan senang mendengar pendapat Anda! Terima kasih banyak telah berkontribusi pada pengetahuan bersama di dunia SEO.
** Semua gambar adalah milik Google (video YouTube). *
Penulis: David Kaufmann

Saya telah menghabiskan lebih dari 10 tahun terakhir benar-benar terobsesi dengan SEO — dan jujur saja, saya tidak mau menukarnya dengan apa pun.
Karier saya mencapai level baru ketika saya bekerja sebagai senior SEO specialist untuk Chess.com — salah satu dari 100 website paling banyak dikunjungi di seluruh internet. Bekerja di skala seperti itu, di jutaan halaman, puluhan bahasa, dan di salah satu SERPs paling kompetitif yang ada, mengajari saya hal-hal yang tidak akan pernah bisa diberikan oleh kursus atau sertifikasi mana pun. Pengalaman itu mengubah cara pandang saya tentang seperti apa SEO yang benar-benar hebat — dan menjadi fondasi bagi semua yang saya bangun setelahnya.
Dari pengalaman itu, saya mendirikan SEO Alive — sebuah agency untuk brand yang serius menggarap pertumbuhan organik. Kami tidak di sini untuk menjual dashboards dan laporan bulanan. Kami di sini untuk membangun strategi yang benar-benar menggerakkan hasil, menggabungkan yang terbaik dari SEO klasik dengan dunia baru yang menarik dari Generative Engine Optimization (GEO) — memastikan brand Anda tidak hanya muncul di tautan biru Google, tetapi juga di dalam jawaban yang dihasilkan AI yang dikirimkan ChatGPT, Perplexity, dan Google AI Overviews kepada jutaan orang setiap harinya.
Dan karena saya tidak bisa menemukan tool yang menangani kedua dunia itu dengan benar, saya membangunnya sendiri — SEOcrawl, sebuah platform enterprise SEO intelligence yang menyatukan rankings, audit teknis, pemantauan backlinks, kesehatan crawl, dan pelacakan visibilitas brand di AI dalam satu tempat. Inilah platform yang selalu saya harap pernah ada.
Temukan lebih banyak konten dari penulis ini

