איך לשנות את קצב הסריקה של Googlebot

פירוש המונח קצב סריקה הוא מספר הבקשות בשנייה ש-Googlebot שולח לאתר שלכם במהלך סריקתו. לדוגמה, 5 בקשות בשנייה.

לא ניתן לשנות את תדירות הסריקה של Google באתר שלכם, אבל אם רוצים ש-Google תסרוק תכנים חדשים או מעודכנים באתר, אפשר לשלוח בקשה לסריקה מחדש.

שימוש נכון

ל-Google יש אלגוריתמים מתוחכמים שקובעים את מהירות הסריקה האופטימלית לאתר. מטרתנו היא לסרוק בכל ביקור כמות גדולה ככל האפשר של דפים באתר שלכם, מבלי להעמיס על רוחב הפס של השרת.

אם Google מבצעת יותר מדי בקשות בשנייה לאתר שלכם ומאטה את מהירות השרת, תוכלו להגביל את מהירות הסריקה של Google באתר.

תוכלו להגביל את קצב הסריקה לאתרים ברמת בסיס. לדוגמה, הכתובת www.example.com והכתובת http://subdomain.example.com. קצב הסריקה שתגדירו הוא קצב הסריקה המקסימלי ש-Googlebot אמור להגיע אליו. שימו לב: ההגדרה לא מבטיחה ש-Googlebot יגיע לקצב המקסימלי הזה.

לא מומלץ להגביל את קצב הסריקה, אלא אם נתקלים בבעיות טעינה בשרת, שמתרחשות בעקבות בקשות רבות מדי ש-Googlebot שולח לשרת.

לא ניתן לשנות את קצב הסריקה באתרים שאינם ברמת הבסיס. לדוגמה, www.example.co.il/folder.

איך להגביל את קצב הסריקה

  1. פותחים את דף ההגדרות של קצב הסריקה של הנכס שלכם.
    • אם קצב הסריקה של האתר שלכם מתואר כ "מחושב כאופטימלי", הדרך היחידה להפחית את קצב הסריקה היא הגשת בקשה מיוחדת. אי אפשר להגביר את קצב הסריקה.
    • אחרת, בוחרים באפשרות הרצויה ולאחר מכן מגבילים את קצב הסריקה. קצב הסריקה החדש יהיה בתוקף למשך 90 יום.

 

האם המידע הועיל?
איך נוכל לשפר את המאמר?