דוח Crawl Stats חדש ב-Google Search Console
בסוף נובמבר 2020, Google שיגרה מחדש את דוח סטטיסטיקת הסריקה המחודש שלה, ונראה שעולם ה-SEO הטכני קיבל זעזוע. עכשיו הוא נקרא Crawl Stats, והודות לו, תוכל ללמוד איך הבוטים השונים של Google מבקרים באתר שלך ולקבל תובנות חשובות מהנתונים השימושיים האלה.
מהו Google Crawl Stats?
זהו שיפוץ יסודי של קטע "crawl stats" שהיה קיים ב-Webmaster Tools הישנים. בעזרתו, נוכל לגשת לנתונים וסטטיסטיקות שונים על היסטוריית הסריקה של Googlebot באתר שלנו. בגרסה החדשה, הוא הופך לכלי לעבודה, במידה מסוימת, עם logs ולא רק תרשים ויזואלי.
אתה יכול לגשת לדוח הזה מחשבון ה-Search Console שלך, תחת Settings > Crawl stats.
מה חדש בדוח המחודש
הוא מביא כמה יכולות חדשות:
- המספר הכולל של בקשות בוטים מקובצות לפי קוד תגובה, סוג קובץ שנסרק, מטרת סריקה וסוג Googlebot. חלקן יהיו מאוד שימושיות עבורך.
- מידע מפורט על host status.
- דוגמאות URL להראות איפה באתר התרחשו הבקשות השונות.
- סיכום מלא של properties עם hosts מרובים ותמיכה ב-domain properties.
קטעים של כלי ניתוח ה-logs של Google
אנחנו מזמינים אותך למסע דרך הקטעים השונים של Crawl Stats. רוצה להצטרף אלינו?
תרשים crawl stats
התרשים החדש הזה, שכבר הותאם לעיצוב הנוכחי של Search Console, מציג סטטיסטיקת סריקה לאורך זמן. בו אתה יכול לראות שלוש מטריקות:
- סך כל בקשות הסריקה לאורך תקופת זמן, או על בסיס יומי אם תרחף עם הסמן מעל התרשים.
- הגודל הכולל של נתונים שהורדו ב-bytes.
- זמן התגובה הממוצע ב-milliseconds.
עד כאן לא הרבה חידוש; זה יותר שינוי ממשק. אבל בוא נסתכל על הקטעים הבאים...
סריקה של ה-hosts השונים ב-domain property שלך
ה-domain property שלך ב-Search Console יכולה להיות מורכבת ממספר hosts, כמו הגרסאות עם ובלי www, או כל subdomain שיש לך. התרשים הזה מאפשר לך לראות איך Googlebot סורק אותם ואתה יכול ללחוץ על כל אחד כדי לקבל מידע מסונן ואינדיבידואלי.
בקטע הזה יכולים להיות לנו 3 אינדיקטורים שבמבט מהיר כבר מספרים לנו הרבה:
קיבוצים חדשים של מאפייני סריקה
אנחנו יכולים עכשיו לסווג ביקורי Googlebot לפי מספר מימדי סריקה:
- לפי תגובה: כך נדע את ההפניות מחדש ודפי השגיאות שדרכם עבר Googlebot במהלך תקופת הזמן שצוינה.
- לפי סוג קובץ: Googlebot עשוי לבזבז הרבה זמן סריקה על סוגי קבצים שלא מעניינים אותנו. הודות לקיבוץ הזה, נדע.
- לפי מטרה: כאן אנחנו יכולים להבחין בין אחוז הסריקה המוקדש לדפים שהוא כבר הכיר לבין גילוי URLs חדשים.
- לפי סוג בוט של Google: אנחנו יודעים של-Google יש סוגים שונים של בוטים ולכל אחד יש את הפונקציה שלו. בדוח הזה נראה כמה פעמים כל אחד מבקר אצלנו.
תוכל לצלול לכל אחד ולראות כמה דוגמאות URL. עם זאת, הן רק זה — דוגמאות. לא כל ה-URLs שתראה בדוח יהיו זמינים לך. אתה יכול לזהות תבניות, אבל לא להוריד את המידע השלם ולעבוד ממנו.
מסקנות לגבי הכלי
זהו שיפור שעוזר רבות לזהות בעיות סריקה משמעותיות באתר בצורה פשוטה וחינמית. אנחנו לא חושבים שזה יחליף כלי ניתוח logs כמו Kibana או Screaming Frog Log File Analyzer, כי מה ש-Google מציעה לנו זו דגימה, לא נתונים מדויקים. בגלל זה, לפרויקטים עם דרישות מיוחדות, זה לא יכול להיות תחליף. בקיצור, נוכל לפתור הרבה בעיות, אבל לא לנתח באופן מלא את הסריקה ש-Google מבצעת באתר שלנו. זכור שזו תכונה שזה עתה הושקה ולעת עתה אנחנו לא יודעים איך היא תתפתח.
מאת: David Kaufmann
במהלך 10+ השנים האחרונות הייתי מרותק לחלוטין ל-SEO — ולמען האמת, לא הייתי רוצה את זה אחרת.
הקריירה שלי עלתה לרמה חדשה כשעבדתי כמומחה SEO בכיר ב-Chess.com — אחד מ-100 האתרים המבוקרים ביותר באינטרנט. עבודה בקנה מידה כזה לימדה אותי מה ששום קורס או תעודה לא יכלו ללמד.
מהניסיון הזה הקמתי את SEO Alive — סוכנות למותגים שרציניים לגבי צמיחה אורגנית. ומכיוון שלא מצאתי כלי שמטפל גם בעולם הקלאסי וגם בעידן ה-AI כראוי, בניתי את SEOcrawl. אם אתה מחפש שותף SEO מנוסה שאוהב את התחום — אשמח לשמוע ממך!
גלה תוכן נוסף של מחבר זה
