Indexing: מה זה ואיך Google מאנדקסת דפים
כשאנחנו מדברים על אינדקס ב-SEO, אנחנו מתייחסים להכללה של URLs באינדקס של מנוע חיפוש.
במילים אחרות, דף נחשב מאונדקס כשמנוע החיפוש כולל אותו בתוצאות החיפוש שלו, ללא קשר למיקום שהוא מחזיק ברגע זה.
החשיבות ב-SEO
הקשר בין אינדקס ל-SEO מורכב יותר ממה שזה נראה במבט ראשון.
מלכתחילה, URL חייב להיות מאונדקס על מנת לרדוף אחר יעדי דירוג בתוצאות החיפוש. לא משנה כמה טוב תבצע אופטימיזציה לדף, אם הוא לא מאונדקס, לא תקבל ביקורים ממנוע החיפוש.
מצד שני, ברגע שדף מאונדקס, מוקצה לו מיקום דירוג. המיקום המדויק יהיה תלוי בשאר הגורמי SEO on-page ו-off-page שעבדנו עליהם עד אותה נקודה.
לגורמים האלה אנחנו יכולים להוסיף אחרים שאנחנו יכולים לשלוט עליהם במידה גדולה או פחותה, בהתאם לכל אחד. אנחנו מדברים על:
-
גיל האתר
-
קצב פרסום URLs שצריכים להיות מאונדקסים
-
תחרות קיימת וכו'.
בנוסף, אינדקס ברמה כמותית גם משפיע על דירוג ה-SEO של דף. ככל שלדומיין יש יותר URLs מאונדקסים, כך הוא צובר יותר משקל במנוע החיפוש בהשוואה לתחרות, באופן הגיוני כל עוד ה-URLs האלה הם באיכות גבוהה — לא רק כמות אלא איכות חשובה, לוקחים את זה כמובן מאליו.
שיטות לדעת אילו דפים מאונדקסים אצלי
יש מספר דרכים שמאפשרות לנו לדעת כמה ואילו דפים מאונדקסים. בהמשך אנחנו מזהים שניים מהשימושיים ביותר:
Search Console
Google Search Console כנראה הכלי הנפוץ ביותר, גם לצפייה בדפים מאונדקסים וגם לשליטה וניהול של פרמטרי SEO אחרים של אתר.
בקטע Index יש לנו את כל המידע שאנחנו צריכים לגבי האינדקס של האתר שלנו.
דוח Coverage מציע לנו היסטוריה של דפים מאונדקסים, עם ציון של אלה שמציגים שגיאות, אלה שאומתו ואלה שמוחרגים, עם האפשרות לבצע השוואות.
פקודת Site
דרך מהירה לבדוק את האינדקס בזמן אמת של דף web היא עם פקודת "site:".
עלינו להשתמש בה במנוע החיפוש עצמו, על ידי הקלדה: site:mydomain.com. תוצאות החיפוש יציגו אז גם את מספר ה-URLs המאונדקסים וגם רשימה של כולם.
זה נורמלי שיהיו הבדלים קלים בין התוצאות של Search Console לאלה שמושגות דרך פקודת site; זה בדרך כלל קורה בגלל מתי כל אחד אוסף את הנתונים.
איך לאנדקס תוכן web
המצב האידיאלי יהיה שברגע ש-URL מתפרסם, הוא יאונדקס אוטומטית. אבל המציאות לא כל כך נוחה.
מה שקורה בפועל הוא ש-Google (כמו שאר מנועי החיפוש) עושה שימוש במספר רובוטי crawling ברחבי האינטרנט כדי לזהות URLs קיימים, אלה שנשארים יציבים, אלה שמשתנים, אלה שנעלמו, וגם ה-URLs החדשים.
אם הוא מזהה URL חדש והאתר ביצע אופטימיזציה לכל הנדרש כדי להעדיף את גישת הרובוט, הוא מנתח את ה-URL ו, אם הוא עומד בתנאים הבסיסיים, הוא מאנדקס אותו ומאפשר את הפרסום שלו בתוצאות החיפוש.
כפי שציינו, זה לא קורה במהירות שהיינו רוצים. כדי להאיץ את האינדקס של URLs חדשים אתה יכול:
-
להשתמש בתוכן שיש לו הרבה תנועה באתר שלנו כדי להוסיף קישור פנימי לדפים האלו על מנת לשפר את הסריקה ולכן את האינדקס
-
להשתמש ב-sitemap כפי שכבר ציינו
-
להשתמש בכלי Google Search Console, "Inspect URL"
כדי אז לאלץ אינדקס דרך "Request indexing"
-
דרך אזכורים בפרופילי social, כמו Twitter, Facebook וכו'. השיטה הזו הייתה יעילה יותר, אבל אם יש לנו מספר משמעותי של משתמשים שיוצרים ביקורים לתוכן, היא בדרך כלל עובדת היטב.
-
דרך תוכניות אינדקס, יש כמה בשוק, חלקם חינמיים ורובם בתשלום. הם בדרך כלל עובדים אונליין ובדרך כלל שימושיים לאינדקס URL מסיבי, אבל אישית אנחנו ממליצים על השיטות האחרות.
האם הכרחי לאנדקס את כל התוכן?
אנחנו עשויים לחשוב ש-100% מהתוכן האונליין שלנו ניתן לאינדקס ויתרה מכך, זה מועיל לנו בכל דרך. אבל זה לא המצב.
אינדקס של כל אלמנט באתר עלול לרמז על קיום duplicate content, אינדקס של דפים ללא ערך וכו'. לכן חשוב שיהיו מגבלות אינדקס.
מסיבה זו, URLs רבים, כמו אלה הקשורים ל-tags, דפים משפטיים, פילטרים, תוצאות חיפוש פנימיות ודומים, מוחרגים מאינדקס זה, בעוד שהשאר מאונדקסים בצורה תקפה.
Sitemap ואינדקס
ה-sitemap מייצג את אבן הפינה של אינדקס דף web. זה קובץ שמשמש כמתווך בתקשורת בין רובוט החיפוש לאתר, מודיע לו אילו URLs ניתנים לאינדקס, איך הם מאורגנים במבנה ה-web, ותאריך העדכון האחרון שלהם.
איך להשתמש בו לשיפור האינדקס
יש מספר דרכים ליצור sitemap. היום, הקלה ביותר היא לנצל תוסף אופטימיזציה וניהול SEO שכולל את האפשרות הזו.
עליך ליצור את ה-sitemap ולאפשר את הפרסום שלו בדומיין, בדרך כלל במבנה הזה: mydomain.com/sitemap.xml.
אם אתה רוצה להבטיח אינדקס טוב יותר דרך ה-sitemap, רשום את הדומיין שלך ב-Google Search Console ובקטע Index תראה שיש קטע Sitemap. אם תכלול את הכתובת של ה-sitemap שלך, מעתה ל-Google תהיה גישה טובה יותר לקובץ שלך, היא תאנדקס את ה-URLs שלך מהר יותר, ותוכל לעקוב אחר כל האבולוציה של אינדקס זה מהכלי האונליין הזה.
איך לבטל אינדקס של URLs
יש דרך נוספת להשתמש ב-sitemap לביטול אינדקס של URLs, וזה עשוי להיראות מנוגד לעצם המושג של האלמנט הזה, אבל זה די שימושי. הוא מורכב מהוספת התג noindex לסט ה-URLs שאנחנו רוצים לבטל את האינדקס שלהם, והעלאה של ה-URLs האלו בלבד ל-sitemap. בדרך זו, נאלץ את Google לסרוק אותם מוקדם יותר, ובראותה את התג noindex, להמשיך לבטל את האינדקס שלהם.
מאמר מומלץ -> איך לבטל אינדקס של URL מ-Google
דרך Search Console
ב-Google Search Console אתה יכול לבקש מ-Google לבטל אינדקס של URL. כדי לעשות זאת, עליך לגשת לקטע Index ולקטע URL Removal. יש לך מספר אפשרויות, כשהסרת תוכן דחוף היא המומלצת ביותר.
אתה רק צריך ליצור בקשה חדשה, לכלול את ה-URL שאתה רוצה לבטל את האינדקס שלו ו-Google תיקח את זה בחשבון, על מנת לבצע את התהליך בהקדם האפשרי.
הנחיית Noindex
אם יש URLs מסוימים או אפילו קטעים שלמים שאתה רוצה למנוע מלהיות מאונדקסים, עם הנחיית noindex תתקשר ל-Google שהיא לא צריכה לקחת אותם בחשבון בכל פעם שהיא סורקת את האתר שלך.
כפי שיכולת לאמת, אינדקס משחק תפקיד יסודי בדירוג SEO ומומלץ לעקוב אחר סטטוס האינדקס של האתרים שלנו ולתת את הטיפול הנדרש לדפים השונים שמרכיבים את האתר שלנו.
מאת: David Kaufmann
במהלך 10+ השנים האחרונות הייתי מרותק לחלוטין ל-SEO — ולמען האמת, לא הייתי רוצה את זה אחרת.
הקריירה שלי עלתה לרמה חדשה כשעבדתי כמומחה SEO בכיר ב-Chess.com — אחד מ-100 האתרים המבוקרים ביותר באינטרנט. עבודה בקנה מידה כזה לימדה אותי מה ששום קורס או תעודה לא יכלו ללמד.
מהניסיון הזה הקמתי את SEO Alive — סוכנות למותגים שרציניים לגבי צמיחה אורגנית. ומכיוון שלא מצאתי כלי שמטפל גם בעולם הקלאסי וגם בעידן ה-AI כראוי, בניתי את SEOcrawl. אם אתה מחפש שותף SEO מנוסה שאוהב את התחום — אשמח לשמוע ממך!
גלה תוכן נוסף של מחבר זה
