הדוח 'נתונים סטטיסטיים של סריקה' (אתרים)

הדוח 'נתונים סטטיסטיים של סריקה' (לאתרים בלבד) מספק מידע על הפעילות של Googlebot באתר שלך במהלך 90 הימים האחרונים. הנתונים הסטטיסטיים מתייחסים לכל סוגי התוכן שהורדנו (כמו CSS‏, JavaScript‏, Flash‏ וקובצי PDF וכן תמונות).

פתיחת הדוח 'נתונים סטטיסטיים של סריקה'

נתונים סטטיסטיים של סריקה זמינים רק עבור אתרים מאומתים.

הבנת הנתונים

אין מספר סריקות שנחשב ל"טוב", אבל התרשים אמור להיות מאוזן יחסית ולעלות עם הזמן, בהתאם להתפתחות האתר. אם התרשים מציג ירידה או עלייה חדה, הנה כמה הסברים אפשריים.

מדוע שיעור הסריקה שלי ירד?

באופן כללי, שיעור הסריקה של Google ​​צריך להיות יציב יחסית לאורך פרק זמן של שבוע או שניים. אם מופיעה ירידה פתאומית, ייתכן שהיא נובעת מאחת מבין הסיבות הבאות:

  • נוסף כלל חדש (או רחב במיוחד) לקובץ robots.txt. יש להקפיד ולחסום רק את המשאבים הרלוונטיים. אם נדרשים ל-Google משאבים ספציפיים כמו CSS או JavaScript כדי להבין את התוכן, יש להימנע מלחסום אותם ל-Googlebot.
  • בדפים מופיע תוכן HTML לא תקין, או תוכן שאינו נתמך: אם Googlebot לא יכול לנתח את התוכן של הדף, אולי משום שהוא משתמש בסוג מדיה שאינו נתמך או כי הדף מכיל רק תמונות, הוא לא יוכל לסרוק את הדפים. אפשר להשתמש בכלי לבדיקת כתובות URL כדי לבדוק איך Googlebot רואה את הדף שלכם.
  • אם האתר מגיב לבקשות באיטיות, Googlebot ירסן את בקשותיו כדי למנוע עומס יתר על השרת. בדוח 'נתונים סטטיסטיים של סריקה' אפשר לראות אם האתר מגיב לאט יותר.
  • אם השיעור של שגיאות השרת עולה, Googlebot ירסן את בקשותיו כדי למנוע עומס יתר על השרת. בדוח שגיאות סריקה אפשר לראות אם חלה עלייה במספר שגיאות הקישוריות בשרת.
  • יש לוודא ששיעור הסריקה המרבי המועדף לא נקבע על ערך נמוך מדי.
  • אם באתר מסוים יש מידע שמשתנה בתדירות נמוכה יותר, או שהוא לא באיכות גבוהה מאוד, ייתכן שלא נסרוק אותו בתדירות גבוהה.  כדאי לבחון את האתר באופן אובייקטיבי, לקבל משוב נייטרלי מאנשים שלא קשורים לאתר, ולחשוב על דרכים או מקומות באתר שאפשר לשפר באופן כללי.

מדוע שיעור הסריקה שלי עלה בחדות?

אם מעלים לאתר כמות גדולה של מידע חדש, או מפרסמים בו מידע מועיל במיוחד, ייתכן שתדירות הסריקה תהיה גבוהה מכפי שהייתם רוצים. אם תדירות הסריקה בשרת גבוהה מדי לטעמכם, הנה כמה טיפים לניהול שיעור הסריקה של Googlebot באתר:

  • כדאי לוודא שהגורם שניגש לאתר הוא Googlebot ולא גורם מבקש אחר, על ידי בדיקה של הדוח 'נתונים סטטיסטיים של סריקה' נוסף על בדיקה של סוכן המשתמש ביומנים.
  • אם צריך לחסום בדחיפות סריקה של Googlebot, יש להחזיר לבקשות קודי תוצאה של ‎503 HTTP.
  • כדאי לחדד את הגדרות הקובץ robots.txt לחסימת דפים שלא צריכים להיקרא.
  • כפתרון זמני, אפשר להגדיר את שיעור הסריקה המרבי המועדף ב-Search Console. לא מומלץ להשתמש בגישה זו לטווח ארוך, משום שהיא לא מאפשרת לספר לנו באופן ספציפי אילו דפים או משאבים יש לסרוק, ואילו לא.
  • חשוב למנוע סריקה של דפים עם תוצאות "אינסופיות", כמו לוח שנה אינסופי או דף חיפוש אינסופי. אפשר לחסום דפים כאלה באמצעות הקובץ robots.txt או תגי nofollow.
  • אם כתובות אתרים מסוימות השתנו או שכבר אינן קיימות, הקפד להחזיר את קודי התגובה הנכונים: השתמש בקוד 404 או 410 עבור כתובות אתרים שכבר לא קיימות או שאינן חוקיות; השתמש בקוד 301 של כתובות אתרים להפניה מחדש עבור כתובות אתרים שהוחלפו לצמיתות בכתובות אחרות (קוד 302 אם השינוי אינו לצמיתות); השתמש בקוד 503 עבור משך השתקה זמני מתוכנן; ודא שהשרת שלך מחזיר קוד שגיאה 500 כאשר הוא נתקל בבעיה שאינו יכול להתמודד איתה.

 

האם המידע הועיל?
איך נוכל לשפר את המאמר?