Roomamise eelarve: mis see on ja kuidas seda optimeerida

Roomamise eelarve: mis see on ja kuidas seda optimeerida

Kui räägime SEO-st, tulevad alati meelde sellised asjad nagu „märksõnad“, „metaandmed“, pealkirjad ja sisu. Kuid tehniline SEO on SEO teine tahk, mis on samuti väga oluline ja mida meie veebisaidi järjestamise strateegias tuleks arvesse võtta.

Selles maailmas kohtame roomamise eelarve mõistet. Analüüsime seda põhjalikult!

Mis on roomamise eelarve?

Roomamise eelarve on aeg, mille Google veebisaiti külastades sellele pühendab. See eelarve mõjutab saidi järjestust ja indekseerimist, ning just seetõttu on oluline pöörata tähelepanu oma veebisaidi roomamise eelarvele. Optimaalse roomamise eelarve saavutamiseks on peamised põhimõtted järgmised:

  • ligipääsetavus

  • kiirus

  • kvaliteet

  • autoriteet

Mis on roomaja?

Roomaja (ingl crawler) on ämblik ehk bot, kes vastutab veebisaitide ja nende URL-ide automaatse roomamise eest. See bot salvestab ja liigitab sisu, mida hiljem kasutajatele otsingutulemustes kuvatakse. Seda nimetatakse Googlebot-iks, kuna me asume Hispaanias ja räägime sellest, et kõige olulisem otsingumootor on Google. Seda arvestades on oluline, et Google leiaks teie veebisaidi ja teaks, et te olemas olete.

Kuidas roomamise eelarve minu veebisaiti mõjutab?

Optimeeritud roomamise eelarve soodustab teie veebisaidi paremat positsioneerimist otsingumootorites. Lisaks aitab see kõiki olulisi lehti õigesti indekseerida. Me ei tohi oma SEO positsioneerimise strateegias roomamise eelarvet unustada, sest aeg, mille Google meie veebisaidi tundmaõppimisse investeerib, on väga oluline.

Kuidas see toimib?

Google'i ämblikud roomavad teie veebisaiti, ja kui roomamise eelarve on väike, on võimalik, et nad lahkuvad teie saidilt, roomamata kogu uut sisu läbi. Eelarve määravad nad kahe teguri põhjal:

  • Roomamise piir: näitab maksimaalset roomamist, mida veebisait talub, ja millised on eelistused.

  • Roomamise nõudlus: näitab sagedust, millega veebisaiti tuleks roomata, lähtudes saidi populaarsusest ja selle uuendamise sagedusest.

Kas teate, kui sageli teie veebisaiti roomatakse?

Tänu Google Search Console'ile saame vaadata viimase kolme kuu roomamisstatistikat. Selles näeme, kui palju lehti see päevas roomab, kui palju kilobaite päevas alla laaditakse ja kui mitme millisekundiga leht alla laaditakse. Andmetel on keskmine, mis on liigitatud kõrgeks, tavaliseks ja madalaks. Need andmed on väga näitlikud, kui võtame arvesse oma veebisaidi lehtede koguarvu ja keskmisi roomamisandmeid päevas. Nende abil saame teada, kas oleme normi piires või, vastupidi, peame roomamise eelarvet parandama.

Roomamisstatistika
Roomamisstatistika

Kas väiksem roomamise eelarve on kahjulik?

Väiksemal roomamise eelarvel on puudused:

  • Sisul on raske kiiresti järjestuda, kuna Google ei tea, et see on olemas, ega roo või indekseeri seda seetõttu.

  • Veebisaidist kaugel asuvad alad muutuvad õrnadeks aladeks, kui roomamise eelarve on väike. Botil ei jätku aega, et läbida lehti või sektsioone, mis veebisaidil kaugemal asuvad.

  • Tehtud lehesisesed (on-page) SEO optimeerimised jäävad roomamata ja seetõttu ei ole parandused nähtavad.

  • Kui mõni teine veebisait indekseerib ja järjestab sama sisu enne meie veebisaiti, võib Google tuvastada, et oleme sisu kopeerinud, ja meid selle eest karistada.

  • Suur roomamise eelarve ei taga midagi, kui me seda õigesti ei optimeeri.

Milline on ämblike käitumine?

Et teada, milliseid lehti Google külastab ja millistesse ta oma roomamisaega investeerib ning kas need langevad kokku meie SEO positsioneerimise prioriteetidega, peame tutvuma logide antud teabega.

Logid on serverile saadetud päringud, mis salvestatakse ja millele saame ligi pääseda, et teada, mida Googlebot külastab ja mida mitte. Selle dokumendi eksportimine ja korrastamine võib olla lihtsam ScreamingFrog Log File Analyseri abil.

Logide analüüs ScreamingFrog Log File Analyseriga
Logide analüüs ScreamingFrog Log File Analyseriga

Kuidas optimeerida meie roomamise eelarvet?

Peame selgelt teadma oma põhilisi URL-e – nii veebisaidi positsioneerimise kui ka äri seisukohalt –, et need saaksid kõige rohkem roomatud. Roomamise eelarvet on kasutu investeerida lehtedele, mis pole tegelikult olulised, näiteks parameetritega lehtedele, lehekülgedeks jaotamistele jne.

Ülioluline on vältida dubleeritud sisu probleeme või URL-e, mis kannibaliseerivad sama märksõna. Ka madala kvaliteediga sisu on kahjulik, sest botid kulutavad selle läbimisele aega.

Selle optimeerimiseks peame rõhutama järgmisi valdkondi:

WPO (Web Performance Optimization)

Optimeerige laadimiskiirust ehk WPO-d, et Google'il ei kuluks teie veebisaidi roomamiseks liiga kaua. Google'ile meeldib puhas kood ja võimalikult vähe faile, et hõlbustada laadimist ja saavutada sirvimisel optimaalne kasutajakogemus.

WPO parandused roomamise eelarve jaoks
WPO parandused roomamise eelarve jaoks

Ärge unustage:

  • Vähendada ja tihendada CSS- ja JS-faile

  • Jälgida piltide kaalu ja suurust ning täpsustada nende suurus

  • Valida serveriks Nginx, et parandada positsioneerimist vahemällu salvestamise (caching) abil.

Lingid ja ümbersuunamised

Bot roomab kogu teie veebisaidi sisu ja järgib ka igat üksikut linki igal lehel. Õige roomamise soodustamiseks peate arvestama järgmisega:

  • Peaksite vältima ebavajalikke ümbersuunamisi, sest Google eksib nendes ära.

  • Ümbersuunamisahelad on paljude URL-ide ümbersuunamised, mis panevad Google'i neis ära eksima, jõudmata siht-URL-ideni.

Ümbersuunamisahelad või ümbersuunamissilmused
Ümbersuunamisahelad või ümbersuunamissilmused
  • Katkised lingid (lehed, millele viidatakse 404 „ei leitud“ staatusega) siselinkimises.

Screaming Frog ja Search Console on meie erilised liitlased vigaste ümbersuunamiste ja igasuguste vigadega URL-ide tuvastamisel.

Vigased ümbersuunamised Search Console'iga
Vigased ümbersuunamised Search Console'iga

Siselinkimine

Siselinkimist on ülioluline hoolikalt jälgida, et mitte linkimisega üle pingutada ja panna bote URL-e roomates ära eksima.

  • Peame tugevdama kõige olulisemaid alasid ja jätma vähem olulised vähem lingituks. Just seetõttu on selliseid lehti nagu privaatsuspoliitika või küpsiste leht, mida ei ole otstarbekas linkida igal lehel peamenüüst või jaluses.

Kood

  • Soovitatav on kaasata võimalikult palju HTML-i, et hõlbustada botidele roomamist ja indekseerimist. On hästi teada, et Google renderdab ja indekseerib JavaScriptiga lehti vaevaliselt.

XML-i saidikaart

Saidikaart on Google'i jaoks üks põhilisi faile, sest see tagab veebisaidi õige roomamise ja indekseerimise.

  • Mida korrastatum, seda parem. Korrastage saidikaart vertikaalide või kaustade järgi.

  • Määrake nimi, mis kirjeldab selle sisu. Vältige liiga üldisi nimesid nagu „sitemap 1“.

XML-i saidikaardi soovitused
XML-i saidikaardi soovitused
  • Eraldi saidikaart piltidele, videotele ja keele järgi.

  • Kaasatud URL-id peaksid alati olema kõige olulisemad, seega ärge lisage lehti ümbersuunamistega, ilma kanoonilise sildita, filtritega lehti, lehekülgedeks jaotamisi jne. Samuti ärge lisage vähetähtsaid lehti, näiteks privaatsuspoliitikat või küpsiseid.

Robots txt

Koos saidikaardiga on robots.txt fail üks võtmefaile veebisaidi indekseerimisel ja roomamisel. Seega ärge unustage seda võimalikult palju optimeerida:

  • Viidake XML-i saidikaardile, et roomamist võimalikult palju hõlbustada.

  • Ärge blokeerige olulisi kaustu. Selleks võite proovida Search Console'i robots.txt testijat ja kontrollida, kas blokeerite mõne olulise kausta või lehe või mitte.

Search Console'i robots.txt testija
Search Console'i robots.txt testija
  • Ärge blokeerige lehti ümbersuunamiste või kanoonilise sildiga

  • Lubage juurdepääs JS-ile ja CSS-ile

Hreflang-sildid

  • Need täiendavad atribuudid aitavad Google'il tuvastada, millistes ja kui mitmes keeles veebisait saadaval on.

Metarobots noindex ja X-Robots-Tag

Need direktiivid ütlevad botile, milliseid lehti või kaustu ei tohiks indekseerida, kuid need ei takista roomamise juurdepääsu.

  • Metarobotsi „noindex“ direktiiviga sildid tarbivad roomamise eelarvet, seega on ülioluline neid mitte üle kasutada.

  • X-Robotsi päis kaasatakse päisesse koodi tasandil ja saab Google'ile anda mitmeid direktiive, sealhulgas lehe mitteindekseerimise.

Kasutatud allikad:

  • José Facchin: Mis on roomamise eelarve, kui oluline see Google'i jaoks on ja kuidas saate seda parandada?

  • SEOCOM Agency: Mis on roomamise eelarve?

  • Big SEO Agency: Mis on roomamise eelarve? Võtmed selle optimeerimiseks

  • ContentKing: Roomamise eelarve SEO-s: teatmejuhend

  • Mi posicionamiento web: Mis on roomamise eelarve?

  • Luis Villanueva: Mis on roomamise eelarve?

  • Neil Patel: Kuidas kasutada Google'i roomamise eelarvet oma veebisaidi SEO parandamiseks

  • Search Engine Journal: 7 nõuannet roomamise eelarve optimeerimiseks SEO jaoks

  • Webmasters Google Blog: Mida roomamise eelarve Googlebot'i jaoks tähendab?

  • DeepCrawl: Mis on roomamise eelarve?

Autor: David Kaufmann

David Kaufmann

Olen viimased 10+ aastat olnud täielikult SEO-sse haaratud — ja ausalt öeldes ei tahaks ma seda teisiti.

Minu karjäär jõudis uuele tasemele, kui töötasin vanem-SEO-spetsialistina Chess.com-is — ühel 100 külastatuimast veebisaidist kogu internetis. Sellises mahus töötamine, hõlmates miljoneid lehti, kümneid keeli ja üht konkurentsitihedaimat SERPs, õpetas mulle asju, mida ükski kursus ega sertifikaat kunagi ei suudaks. See kogemus muutis minu arusaama sellest, milline suurepärane SEO tegelikult välja näeb — ja sai aluseks kõigele, mille olen sellest ajast peale üles ehitanud.

Sellest kogemusest lähtudes asutasin SEO Alive — agentuuri brändidele, kes suhtuvad orgaanilisse kasvu tõsiselt. Me ei ole siin selleks, et müüa dashboards ja igakuiseid aruandeid. Me oleme siin selleks, et luua strateegiaid, mis päriselt tulemusi liigutavad, ühendades klassikalise SEO parima osa põneva uue Generative Engine Optimization (GEO) maailmaga — tagades, et teie bränd ilmub mitte ainult Google'i sinistes linkides, vaid ka AI genereeritud vastustes, mida ChatGPT, Perplexity ja Google AI Overviews iga päev miljonitele inimestele edastavad.

Ja kuna ma ei leidnud tööriista, mis mõlemat neist maailmadest korralikult hallanuks, ehitasin selle ise — SEOcrawl, enterprise SEO intelligence platvormi, mis toob kokku rankings, tehnilised auditid, backlinks jälgimise, crawl tervise ja AI brändi nähtavuse jälgimise ühte kohta. See on platvorm, mille olemasolu ma alati soovisin.

→ Loe kõiki David artikleid
Rohkem selle autori artikleid: David Kaufmann

Avastage rohkem selle autori sisu