איך למצוא את ה-Sitemap של אתר

מהו Sitemap?

XML sitemap הוא רשימה של הדפים באתר שמטרתו לעזור למנועי החיפוש השונים. הוא מספק מידע חשוב על ה-URLs באתר שלך כולל דפים, סרטונים, תמונות, קבצים ומה הקשר ביניהם. יחד עם הדפים, XML sitemaps כוללים גם מטא-נתונים נוספים על כל URL:

• ›תאריך עדכון אחרון - באיזו תדירות הוא משתנה ו - העדיפות שלו לעומת הדפים האחרים.

כשמדובר בשיטות עבודה מומלצות של SEO, sitemap צריך להיות מאופטם כדי לכלול רק תוכן ניתן להוספה לאינדקס ואיכותי. כל דף שבור (404), הפניה מחדש או כפול בתוכו יכול לבלבל מנועי חיפוש.

ה-sitemap הוא כמו מתאר של אתר. הוא נבנה בפורמט קוד ובדרך כלל נראה ככה:

או ככה:

למה אתה צריך למצוא Sitemap?

כבר כיסינו את היסודות של sitemaps, כולל המטרה העיקרית שלהם. עכשיו בוא נראה למה אנחנו עשויים לרצות למצוא את הקבצים האלה מלכתחילה.

כפי שדנו לעיל, sitemaps הם דרך פשוטה ובלתי ניתנת להחלפה ליידע מנועי חיפוש ובמיוחד את הסורקים שלהם (לדוגמה Googlebot) על התוכן החשוב באתר שלנו.

קודם כל, אתה עשוי לרצות לבדוק אם יש לך XML sitemap בכלל. אם יש לך אחד, הצעד הבא הוא לבדוק אותו ולראות אם הוא נוצר כראוי ומכיל את המידע הנכון.

לבסוף, אם אין לך sitemap, אתה עשוי לרצות ליצור אחד ולהגיש אותו למנועי חיפוש. קח בחשבון ש-XML sitemaps אינם חובה בשום אופן. עדיין הם עוזרים לסורקי חיפוש למצוא, להוסיף לאינדקס ובסופו של דבר לדרג אתרים ודפים חדשים בדרך מהירה יותר.

עכשיו זה הזמן לצלול לעבודת הבילוש ולמצוא את ה-sitemaps האלה!

מוכן? בוא נתחיל!

דרכים פשוטות למצוא את ה-Sitemap שלך

בוא נתחיל את המסע שלנו עם כמה מהדרכים הקלות ביותר למצוא את ה-sitemap של אתר.

1) בדוק ידנית מיקומי XML Sitemap נפוצים

אחת הדרכים הנפוצות (והפשוטות) ביותר לאתר את ה-XML sitemap של אתר היא לבדוק ידנית כמה מיקומים סטנדרטיים. זה פשוט ביותר וכל מה שאתה צריך לעשות זה להזין את ה-URL של האתר שלך בדפדפן ואז לנסות עם כמה ווריאציות שונות. תן לי להראות לך:

• ›www.YourWebsiteUrl.com/**sitemap.xml**

זה המיקום הפופולרי ביותר, אבל לא היחיד. לכן, אם לא יהיה לנו מזל בניסיון הראשון שלנו, הנה כמה בדיקות מהירות נוספות לנסות:

• ›/sitemap_index.xml (שזה האינדקס של כל ה-sitemaps במקרה שיש לאתר יותר מאחד).

זה המקרה עם ה-XML sitemap שלנו עצמנו בבלוג הזה. תן לי להראות לך:

והנה איך זה נראה:

בעיקרון, אלה כל sitemaps נפרדים שמחולקים לפי סוג הפוסטים שיש להם בתוכם.

עכשיו, אם אנחנו עדיין לא ברי מזל, בוא ננסה עוד כמה אפשרויות:

• ›/sitemap-index.xml- /sitemap.php- /sitemap.txt- /sitemap.xml.gz- /sitemap/- /sitemap/sitemap.xml- /sitemapindex.xml- /sitemap/index.xml- /sitemap1.xml

הערה: קבצי XML הם רק אחת מהדרכים לתאר sitemap. יש גם פורמטים של RSS ו-Atom.

לכן, אנחנו צריכים להוסיף עוד כמה מיקומי sitemap אפשריים:

• ›/rss/- /rss.xml- /atom.xml

נדבר עליהם יותר מאוחר.

רק כדי לאשר - אנחנו צריכים לשים את שם הדומיין של האתרים לפני ה-"/" כשמנסים את החלופות השונות.

2) בדוק את קובץ ה-Robots.txt

אם אתה עדיין איתנו, זה אומר שאו שלא הצלחת למצוא את הקובץ שזו המטרה העיקרית של המאמר שלנו או שאתה פשוט סקרן ונלהב ללמוד יותר.

למעשה, לא משנה מהי הסיבה המדויקת, יש לי חדשות טובות בשבילך - נמשיך את המסע שלנו עם טיפ פשוט מאוד נוסף.

Robots.txt הוא קובץ מיוחד שידוע ל-SEOs (וגם למתכנתים) שמספק הנחיות שימושיות לסורקי מנועי חיפוש. יתרה מכך, זה גם המקום שבו אתה יכול לעיתים קרובות מאוד למצוא קישור ל-sitemap של אתר.

הרעיון הוא שכאשר מנועי חיפוש מבקרים בקבצי ה-robots.txt האלה, הוספת קישור ל-sitemap שם, היא הגיונית. בדרך זו, יהיה להם קל יותר לזהות את ה-sitemap מלכתחילה ולסרוק את האתר.

מוכן לעוד חדשות טובות?! הנה זה - כדי לגשת לקובץ ה-robots.txt של אתר אתה רק צריך להוסיף /robots.txt לשם הדומיין שלך בדפדפן וללחוץ "Enter". זה דומה לשלב הקודם שבו הוספנו את נתיבי ה-sitemap האפשריים השונים.

מה עובד טוב יותר מדוגמה מהחיים האמיתיים? ראה את כתובת ה-URL של קובץ ה-robots.txt שלנו:

https://seocrawl.com/robots.txt

זה קובץ קטן אבל פשוט ושימושי עם כמה פונקציות חשובות. במקרה שכבר פתחת אותו, תוכל לראות כמעט מיד את האבן הקטנה והיקרה שאתה מחפש - את קובץ ה-sitemap:

Voilà! הבטחתי לך שזה יהיה קל :)

3) בדוק את Google Search Console

אוקיי, sitemap עדיין לא נמצא? אין בעיה! יש לנו עוד טיפים בשבילך שיעזרו לנו למצוא את הדרך שלנו.

תן לי להראות לך דרך קלה ומהירה נוספת.

Google Search Console (שידועה גם בשם Webmaster Tools בעבר) הוא עוד מקום למצוא את הנתיב שאנחנו מחפשים. כמובן, כדי שזה יהיה אפשרי, אתה צריך להיות בעלים של האתר או שניתנה לך גישה.

אם אתה עומד באחד הקריטריונים האלה, הצעד הבא הוא להיכנס ל-GSC ומהתפריט בצד שמאל לבחור Sitemaps:

עכשיו, במקרה שה-sitemap (או ה-sitemaps) כבר הוגש על ידי מישהו אחר בעבר, תוכל לראות אותו מיד:

יחד עם כתובת ה-URL המדויקת של ה-sitemap, יש מידע נוסף כמו סוג ה-sitemap (קבצי אינדקס שמכילים sitemaps אחרים בתוכם או sitemaps רגילים עם הדפים של האתר), מתי הוא הוגש, נקרא לאחרונה, סטטוס וכמה URLs יש בפנים.

טיפ: אם אתה רציני לגבי SEO ושיפור ביצועי האתר האורגניים שלך, Google Search Console הוא כלי חובה. התובנות שאתה יכול לקבל ממנו רבות.

בנוסף, בונוס נוסף הוא שיש GSC מאפשר לך לנסות את הכלי העוצמתי שלנו - SEOcrawl

4) בדוק את Bing Webmaster Tools

החדשות הטובות הן שBing Webmaster Tools עובד כמעט באותה דרך כמו Google Search Console. זה לא מפתיע שהאחרון נקרא בעבר Google Webmaster Tools מאחר שיש להם הרבה במשותף.

שוב, אתה צריך להיכנס ואז לנווט לסרגל הצד השמאלי, שם תהיה לך את הקטע "Sitemaps" זמין.

לחץ עליו, ובמקרה שהיה sitemap/sitemaps שכבר הוגשו, תוכל לחקור אותם הלאה.

דרכים מתקדמות למצוא את ה-Sitemap שלך

עדיין איתנו? אוקיי, זה אומר שאו שאתה עדיין מחפש את מיקום קובץ ה-sitemap היקר הזה, או שאתה אמיץ מאוד להיכנס ל-קטע המתקדם. בשני המקרים, אני רוצה לברך אותך על שהגעת עד כאן ולאחל לך הצלחה :)

אני מבטיח שזה לא יהיה כל כך מסובך ומפחיד! בוא נתחיל!

5) השתמש ב-Google Search Operators

Google search operators (שידועים גם בשם פקודות) יכולים להיות עוצמתיים מאוד למטרות שונות של SEO (לדוגמה מציאת הזדמנויות link building, רעיונות תוכן, גילוי בעיות טכניות ועוד). עם זאת, במקרה הזה, נשתמש בהם כדי למצוא את ה-XML sitemap של האתר שאנחנו בודקים.

לשם כך, נצטרך לנצל את הפקודה "filetype:". היא יכולה להיות ממש שימושית כשמשלבים אותה עם הפקודה "site:". בעיקרון, השילוב של שניהם יחפש סוגי קבצים ספציפיים רק באתר שאנחנו רוצים.

דוגמה: site:chess.com filetype:xml

והנה מה שהחיפוש הזה יביא ב-Google:

הנה זה! כל ה-sitemaps שהוכנסו לאינדקס של האתר מוצגים ב-Google ואנחנו יכולים לחקור אותם הלאה.

במקרה שיש כמה תוצאות לא רלוונטיות שמוצגות, אתה יכול לחדד את החיפוש שלך עוד יותר. הפעם נוסיף את ה-operator "inurl" לארסנל שלנו.

לדוגמה: site:uefa.com filetype:xml inurl:sitemap

הערה: כפי שציינו לעיל sitemaps יכולים להיות גם קבצי טקסט. כדי למצוא אותם, אנחנו יכולים לעשות חיפוש דומה אבל עם סיומת שונה.

לדוגמה: site:WebsiteURL inurl:sitemap filetype:txt

וזה יוביל לבא:

טיפ: הפקודות האלה יחשפו את המיקום של ה-sitemap רק אם הוא בכלל באינדקס של Google. כמה plugins של WP שיוצרים sitemaps אוטומטית מוסיפים את התג no follow, no index ל-Sitemaps. אז, אם בסוף לא נמצאו תוצאות, אל תדאג!

בוא נמשיך עם הרעיון הבא.

6) השתמש בכלי אונליין

טכניקה נוספת היא לנסות עם כלי אונליין כמו SEO Site Checkup שבו אתה רק צריך להדביק את ה-URL של האתר שלך וללחוץ Checkup. אז תקבל משהו ככה:הערה: הדרך שהכלי הזה עובד היא על ידי בדיקת מיקומי ה-sitemap הסטנדרטיים שהזכרנו קודם (sitemap.xml, sitemap1.xml, sitemapindex.xml וכן הלאה). לכן, הוא עלול לא למצוא את האתר שלך במקרים ספציפיים אחרים.

7) בדוק את ה-CMS של האתר

בהתאם למערכת ניהול התוכן שעליה האתר רץ, XML sitemaps עשויים להיות ממוקמים במקומות שונים. החדשות הטובות הן של-CMSes הפופולריים ביותר יש מיקומי ברירת מחדל שאתה עשוי לרצות להתחיל את החיפוש שלך מהם.

ראשית, אנחנו צריכים לזהות את ה-CMS של האתר. זה תהליך די פשוט ואנחנו יכולים להשתמש גם בכלים אונליין וגם בהרחבות דפדפן.

לדוגמה, addon שימושי הוא Built With שמזהה לא רק את ה-CMS אלא הרבה יותר תוכנות ותוכניות שהאתר משתמש בהן. הנה איך הוא מציג את המידע שאתה מחפש:

אם אתה מעדיף כלי אונליין, פתרון אפשרי אחד הוא WhatCMS:

חלופה היא CMS Detect:

עכשיו, כשאנחנו יודעים את ה-CMS המדויק, בוא נחקור כמה ממערכות ניהול התוכן הפופולריות ביותר ואיפה הן בדרך כלל שומרות את קבצי ה-XML.

Wordpress

לפני 2020, הדרך שבה sitemaps נוצרו הייתה בעיקר דרך plugins. עם זאת, כיום, עם הפונקציונליות המובנית של WP, הם צריכים להיות ממוקמים ב-/wp-sitemap.xml.

עדיין, במקרה שהאתר שאתה בודק משתמש ב-plugin ליצירת ה-sitemap, אתה יכול לנסות עם כמה מהמיקומים הבאים:

• ›/sitemap.xml- /tag-sitemap.xml- /sitemap_index/xml- /category-sitemap.xml

לחלופין, אתה יכול לבדוק את ההגדרות של ה-plugin ולמצוא את הנתיב שם.

Wix, Shopify, Joomla, Squarespace, Magento

החדשות הטובות הן שכל אלה אוטומטית מייצרים את ה-XML sitemaps עבור המשתמשים שלהם. לכן, מיקום ברירת המחדל (אם לא שונה בנוסף) הוא: /sitemap.xml

עם ההערה שהשם של הדומיין מגיע לפני החלק "/".

בונוס: Bookmarklet לגילוי Sitemap.xml מיידי

במקרה שאתה אוהד של פרודוקטיביות וחיסכון בזמן מכל משימה קטנה (האם לא כל ה-SEOs כמונו ככה?!), אז אתה עשוי למצוא bookmarklet מהיר ושימושי כדי לבדוק מיד את ה-XML sitemap של אתר.

אתה רק צריך להוסיף את קוד ה-javascript הזה:

javascript:void(location.href='http://' + location.host + '/sitemap.xml')

סמן אותו ובכל פעם שתלחץ עליו הוא יפתח את קובץ ה-Sitemap במקרה שהוא ממוקם במיקום ברירת המחדל /sitemap.xml.

מהיר וקל!

מציאת סוגים אחרים של Sitemaps

דיברנו בעיקר על XML sitemaps מאחר שהם הפורמט הנפוץ ביותר להראות לסורקים מה קורה בדומיין שלך. עדיין, שווה להזכיר את הסוגים האחרים שאפשר למצוא גם הם בכמה אתרים.

• ›HTML. אלה בדרך כלל נעשים כדי להקל על המשתמשים והם מאוד מועילים במיוחד לאתרים גדולים יותר.

לדוגמה, Ebay מספקים למבקרים שלהם "מפה" וירטואלית עם הדפים והקטגוריות הראשיים: https://pages.ebay.com/sitemap.html

• ›

  RSS. בכמה מקרים אתרים משתמשים ב-RSS feed כ-sitemap שבדרך כלל ממוקם ב: /rss/ או /rss.xml.

• ›

  Atom. אותו דבר חל על Atom feed ובדרך כלל אתה יכול למצוא אותו כ: /atom.xml- TXT. זה קובץ טקסט סטנדרטי כפי שכבר דנו בדוגמה כזו אחת. מיקום: /sitemap.txt

אין sitemap? מה לעשות במקרה הזה?

אחרי שעברנו על האפשרויות השונות למציאת sitemap, טוב להגיד כמה מילים על מה לעשות אם אין sitemap שכבר נוצר. זה יהיה המקרה ברוב האתרים החדשים לחלוטין שהיו אונליין למשך תקופה קצרה. או כמה אתרים מאוד קטנים וזעירים.

כמו כן, קח בחשבון שלא כל האתרים צריכים sitemaps. אם לאתר יש רק כמה דפים, תהיה בסדר גם בלי אחד.

עדיין, אם אתה מוכן ליצור את ה-XML sitemap שלך, אתה יכול פשוט להשתמש ב-plugin שתואם למערכת ה-CMS שלך. כמה דוגמאות טובות ל-WP הן:

• ›Rank Math Sitemap Plugin- WP Sitemap Plugin- Google XML Sitemaps- WordPress SEO by Yoast

לחלופין, אתה יכול ליצור sitemap ידנית או להשתמש בסורק כדי לעבור על האתר שלך ולייצא sitemap להעלאה.

לסיכום:

אני מקווה שהטיפים האלה עזרו לך לצלול עמוק יותר לעולם של Sitemaps ואתה עכשיו מכיר יותר את איך הם עובדים, למה אנחנו צריכים אותם... וכמובן איך למצוא אותם.

ספר לנו בתגובות אם יש משהו אחר שתרצה לדעת עליו או פשוט לשתף את הניסיון שלך :)

בהצלחה!