Kaip aptikti ir ištaisyti dubliuotą turinį?

Jei dirbate SEO srityje, tikriausiai jau esate susidūrę su viena dažniausių problemų, veikiančių paieškos sistemų reitingus ir galinčių užtraukti baudas: dubliuotu turiniu. Pagrindinis paieškos sistemų, tokių kaip „Google“, „Bing“ ar „Yahoo“, tikslas – parodyti aktualiausią informaciją pagal vartotojų paieškos ketinimą. Tam jos reitinguoja mažėjančia tvarka, apdovanodamos originalų, aukštos kokybės turinį ir baudžiamos turinį, kuris buvo nukopijuotas, dubliuotas, yra neaktualus arba buvo manipuliuotas siekiant aukštesnės pozicijos rezultatų puslapiuose.
Šiame straipsnyje paaiškinsime, kas yra dubliuotas turinys, kaip jį galime aptikti ir ištaisyti, kokį poveikį jis daro SEO ir kokius įrankius galime naudoti dirbdami su juo. Prisijungsite prie mūsų? Pradėkime! ?
Kas yra dubliuotas turinys?
Kaip jau minėjome, paieškos sistemos, tokios kaip „Google“, baudžia puslapius, turinčius dubliuoto turinio, kuris suvokiamas kaip du puslapiai skirtingais URL adresais, bet identišku turiniu. Todėl, kiek įmanoma, venkite kopijuoti turinį iš kitos svetainės ir įklijuoti jį savojoje (taip išvengsite daugybės galvos skausmų su „Google“ ir galimų teisinių veiksmų iš svetainių, iš kurių paėmėte turinį, savininkų!?).
SEO Alive patarimas**:** Kaip paieškos sistemų optimizavimo srityje besispecializuojanti agentūra, primygtinai rekomenduojame rūpintis savo svetainės turiniu ir vengti šios blogos praktikos. Būkite kantrūs ir atkaklūs, rašykite originalų turinį, ir rezultatai atsiras greičiau, nei tikitės. Šiuo klausimu „Google“ labai aiškiai išsako savo poziciją, kaip matome jos oficialioje dokumentacijoje apie dubliuotą turinį, todėl turime būti labai atsargūs su tuo, ką rašome.
Kalbant apie SEO reitingavimą, galime išskirti du dubliuoto turinio tipus: vidinį ir išorinį dubliuotą turinį.
Vidinis dubliuotas turinys
Šis dubliuoto turinio tipas paprastai atsiranda dėl netinkamo URL parametrų įgyvendinimo arba prasto kategorijų ir žymų taksonomijų valdymo. Galimos priežastys, galinčios sukelti vidinį dubliuotą turinį, yra šios:
- Klaidos kuriant kategorijas ir žymas: Ši klaida dažna tinklaraščiuose, kuriuose yra didelis straipsnių sąrašas, o kategorijos ir žymos kuriamos be jokios tvarkos ar logikos. Panagrinėkime pavyzdį:
Įsivaizduokime, kad turime skaitmeninės rinkodaros tinklaraštį su keliomis kategorijomis:
https://myblogdigital.com/category-a/topic/
https://myblogdigital.com/category-b/topic/
https://myblogdigital.com/category-c/topic/ Kad išvengtume dubliuoto turinio, būtina pažymėti, kuris iš jų yra pagrindinis, o kiti du canonical nuoroda nukreipti į pagrindinį URL.
- „Non-www“ vs „www“ ir „http“ vs „https“ domenai: Tai dar viena klaida, į kurią turime atkreipti dėmesį. Gali būti, kad jei paieškos sistemoms nenurodėme, kuris domenas yra kanoninis, jos gali pasiekti kitas versijas ir sukurti dubliuotą turinį. Todėl iš SEO Alive rekomenduojame nustatyti, kuris bus jūsų kanoninis domenas, ir sukurti 301 peradresavimus į pageidaujamą versiją.
- Parametrizuoti URL adresai: Ši klaida dažna el. prekybos svetainėse, kur URL adresai su parametrais leidžia filtruoti, kad vartotojams būtų pateikta informacija. Tarkime, turime laikrodžių pardavimo svetainę ir tokį URL:
https://www.mywatchstore.com/watches/garmin?color=black Šis puslapis rodytų visus „Garmin“ modelio laikrodžius juoda spalva.
Galimybė nustatyti filtrus puslapiuose gali tapti rimta nepatogumu, jei ji nėra tinkamai valdoma, nes paieškos sistemos gali rodyti kelias URL kombinacijas:
https://www.mywatchstore.com/watches/garmin?color=black&type=sport
https://www.mywatchstore.com/watches/garmin?type=sport&color=black Todėl iš SEO Alive rekomenduojame kanoninę versiją nustatyti į nefiltruotą puslapį, kad likę parametrizuoti URL adresai išsaugotų savo puslapio autoritetą (URL Ratio).
Išorinis dubliuotas turinys
Išorinis dubliuotas turinys – tai bet koks turinys, kuris yra ištrauktas, visiškai arba iš dalies nukopijuotas iš vienos ar kelių svetainių, priklausančių skirtingiems žiniatinklio valdytojams ar administratoriams.
Ši praktika paieškos sistemų akimis laikoma spamu; todėl, kaip minėjome straipsnio pradžioje, jos reikėtų vengti bet kokia kaina.
Kita išorinio dubliuoto turinio priežastis gali būti sindikavimo strategijos, kai svetainės siunčia srautą į kitas svetaines siekdamos manipuliuoti paieškos sistemomis. Šiandien „Google“ algoritmas yra pakankamai išmanus, kad aptiktų tokio pobūdžio praktiką.
Kaip galime patikrinti, ar mūsų svetainėje yra dubliuoto turinio?
Mokėti aptikti dubliuotą turinį svetainės turinio strategijoje yra ypač svarbu. Jei nekontroliuosime šio veiksnio, rizikuojame, kad mūsų puslapiai palaipsniui slys žemyn nuo aukščiausių pozicijų „Google“, nes „Google“ nuolat tobulina SERP rezultatus ieškodama originalaus, aukštos kokybės turinio. Todėl pateiksime pavyzdį, kaip galėtume aptikti turinį savo svetainėje, ir keletą strategijų, kaip išvengti tokio pobūdžio turinio.
Tarkime, turime internetinę parduotuvę (el. prekybą), kurioje yra spausdintina kiekvieno produkto puslapio versija. Tai laikoma dublikatu, nes egzistuoja dvi to paties turinio „versijos“ skirtingais URL adresais:
Produkto informacijos puslapis: https://mywebsite.com/product3560
Spausdintina versija: https://mywebsite.com/product3560_print Kad išvengtume tokio pobūdžio dubliuoto turinio, galime taikyti šias strategijas:
1 strategija: 301 peradresavimų naudojimas
Jei pertvarkėme savo svetainę, galime sukurti 301 peradresavimus (nuolatinius peradresavimus) per SEO įskiepius, esančius įvairiose turinio valdymo sistemų (TVS) saugyklose, arba per .htaccess failą, kad išmaniai peradresuotume vartotojus, paieškos sistemų robotus ir kitus įrankius su nuskaitymo funkcija.
2 strategija: canonical žymės naudojimas
Žymė rel="canonical" naudojama nurodyti paieškos sistemoms, kuris puslapis yra originalus (kanoninė versija), o kurie puslapiai yra kopija. Tokiu būdu paieškos sistemos robotas sutelks savo indeksavimo nuskaitymo biudžetą į puslapį, pažymėtą šia meta žyme.
Norėdami naudoti canonical žymę, pirmiausia turime pasirinkti, kurį puslapį norime, kad rodytų paieškos sistemos, ir į HTML kodą, </head> skiltyje, pridėti tokią eilutę (panagrinėkime canonical pavyzdį produkto puslapyje „Zalando“ svetainėje):
<link rel="canonical" ahref= "https://www.zalando.es/adidas-originals-stripe-circle-camiseta-estampada-white-ad121000k-a11.html"/> Pavyzdžiui, jei viename URL rodome produkto informaciją, o kitame URL tą pačią informaciją su kitomis spalvomis, galime nurodyti „Google“, kuris yra kanoninis URL, kurį norime rodyti vartotojams.
3 strategija: robots.txt failo naudojimas
Redaguodami šį failą galime nurodyti paieškos sistemų robotams nenuskaityti tam tikrų mūsų svetainės puslapių ar skilčių. Įsivaizduokime, kad mūsų svetainėje yra tokie produktų puslapiai:
https://www.mywebsite.com/category/product-page.html/
https://www.mywebsite.com/category/product-page1.html/ (versija su dubliuotu turiniu)
Su tokiu nurodymu robots.txt faile:
- Disallow /product-page.1html/
Galime užkirsti kelią dubliuotam turiniui atsirasti, žinoma, be to, pirmąjį URL nustatydami kaip kanoninę versiją.
Dubliuoto turinio poveikis SEO reitingavimui
Po pirmosios „Google Panda“ algoritmo versijos išleidimo dar 2011 m., kuri baudė domenus su menkaverčiu turiniu ir dubliuotu turiniu, Mattas Cuttsas 2013 m. paskelbė vaizdo įrašą apie tai, kaip „Google“ tvarko dubliuotą turinį ir kokį neigiamą poveikį jis gali turėti reitingo pozicijoms SEO požiūriu:
Iš Matto Cuttso vaizdo įrašo galime padaryti tokias išvadas: nors, anot „Google“, 25–30 % žiniatinklio yra dubliuotas turinys, paieškos sistema jo tiesiogiai netraktuoja kaip spamo, nebent ketinama apgaulingai kurti ar kopijuoti turinį dideliais kiekiais arba tiesiogiai manipuliuoti pozicijomis paieškos rezultatų puslapiuose „black hat“ taktikomis.
Trumpai tariant, tokio pobūdžio turinio kūrimas gali generuoti prastos kokybės signalus paieškos sistemoms, tokioms kaip „Google“, taip pat tapti kliūtimi konsoliduoti turinio nuorodų metrikas (tokias kaip autoritetas, aktualumas ar patikimumas) išorinių nuorodų (atgalinių nuorodų), galinčių vesti į skirtingas to turinio versijas, požiūriu.
Įrankiai dubliuotam turiniui aptikti
Kalbant apie dubliuoto turinio aptikimą, rinkoje yra begalė įrankių, galinčių palengvinti šią užduotį. Pažvelkime į juos! ?
Įrankiai dubliuotam turiniui mūsų svetainėje aptikti
- Ahrefs: Su Ahrefs galime pamatyti, „site audit“ funkcijoje ir su sąlyga, kad esame pridėję projektą SEO auditui, ar mūsų svetainėje yra dubliuoto turinio, ar ne. Tam eisime į „duplicate content“ skirtuką. Ten mums bus parodyta diagrama, kurioje galėsime nustatyti galimas klaidas, kurias reikia ištaisyti:

Ahrefs „Duplicate Content“ funkcijos vaizdas
- Screaming Frog: Su šiuo gerai žinomu programiniu nuskaitymo įrankiu taip pat galima aptikti dubliuotą turinį. Tam turėsime įvesti domeną, kurį norime nuskaityti, ir eksportuoti „internal“ duomenis į .csv formatą. Skaičiuoklėje galėsite peržiūrėti, rūšiuoti ir filtruoti, kurie puslapiai turi dubliuotus pavadinimus, meta aprašymus, antraštes ir t. t.
SEO Alive patarimas: Naudokite sąlyginio formatavimo taisykles savo skaičiuoklėje, kad nustatytumėte, kuriuos URL taisysite pagal turimo dubliuoto turinio lygį bei kiekvieno puslapio svarbą ir aktualumą.
- Safecont: Šis įrankis tikrai įdomus, nes yra skirtas išimtinai turinio analizei ir naudoja „machine learning“, kad aptiktų ir surastų klasterius bei turinio panašumus. Jis gana išsamus, ir jo naudojimas gali suteikti mums daug naudos, jei norime aptikti dubliuotą turinį savo svetainėje.

Safecont „Similarity“ funkcijos vaizdas
Įrankiai dubliuotam turiniui iš kitos svetainės aptikti
- Copyscape: Jei norime sužinoti, ar tam tikras turinys yra dubliuotas kitos svetainės atžvilgiu, Copyscape yra paieškos sistema, besispecializuojanti aptikti tinklalapius, plagijuojančius turinį. Šioje paieškos sistemoje tereikia įvesti URL, kuriame yra turinys, kurį norite patikrinti, ir įrankis grąžina puslapius, dalijančius tuo turiniu, surūšiuotus nuo didžiausio iki mažiausio panašumo laipsnio.
- Plagium: Tai dar vienas įrankis, labai panašus į Copyscape, su tuo skirtumu, kad vietoje URL turime įvesti tekstą, kurį norime patikrinti. Verta paminėti, kad jis turi mokamą versiją, todėl „nemokama“ versija turi ribą iki 5 000 simbolių patikrinti.
Išvados
SEO Alive esame 100 % „White Hat SEO“ agentūra, todėl mūsų rekomendacija straipsnio pabaigoje – visada vengti dubliuoto turinio. Jei aptiksite tokio pobūdžio turinį savo svetainėje, remkitės visomis mūsų pateiktomis strategijomis ir patarimais. ? Atminkite: „Google“ mėgsta originalų, aukštos kokybės turinį!
O jūs, ar esate patyrę blogos patirties su dubliuotu turiniu arba nukentėję nuo kokios nors baudos dėl jo? Kaip išsprendėte problemą? Papasakokite mums apie tai, jei norite, komentarų laukelyje! Mielai atsakysime. Iki kito karto!
Autorius: David Kaufmann

Pastaruosius 10+ metų praleidau visiškai apsėstas SEO — ir, tiesą sakant, nenorėčiau, kad būtų kitaip.
Mano karjera pakilo į naują lygį, kai dirbau vyresniuoju SEO specialistu Chess.com — vienoje iš 100 lankomiausių svetainių visame internete. Darbas tokiu mastu, apimant milijonus puslapių, dešimtis kalbų ir vieną konkurencingiausių SERPs, išmokė mane to, ko joks kursas ar sertifikatas niekada nebūtų galėjęs. Ta patirtis pakeitė mano supratimą apie tai, kaip iš tikrųjų atrodo puikus SEO — ir tapo pagrindu viskam, ką nuo tada sukūriau.
Iš tos patirties įkūriau SEO Alive — agentūrą prekės ženklams, kurie rimtai žiūri į organinį augimą. Mes čia ne tam, kad pardavinėtume dashboards ir mėnesines ataskaitas. Mes čia tam, kad kurtume strategijas, kurios iš tikrųjų daro poveikį, sujungdami tai, kas geriausia klasikiniame SEO, su jaudinančiu nauju Generative Engine Optimization (GEO) pasauliu — užtikrindami, kad jūsų prekės ženklas pasirodytų ne tik Google mėlynosiose nuorodose, bet ir AI sugeneruotuose atsakymuose, kuriuos ChatGPT, Perplexity ir Google AI Overviews kasdien pateikia milijonams žmonių.
Ir kadangi neradau įrankio, kuris tinkamai valdytų abu šiuos pasaulius, sukūriau jį pats — SEOcrawl, enterprise SEO intelligence platformą, kuri vienoje vietoje sujungia rankings, techninius auditus, backlinks stebėseną, crawl būklę ir AI prekės ženklo matomumo sekimą. Tai platforma, apie kurios egzistavimą visada svajojau.
Atraskite daugiau šio autoriaus turinio

