למה הדף לא מופיע בחיפוש Google?

לפניכם הסבר על הדרכים לפתרון הבעיות הנפוצות ביותר במקרה שהדף או האתר שלכם לא מופיעים בתוצאות החיפוש ב-Google.

האם יצרתם את הדף או ביקשתם להוסיף אותו לאינדקס רק בזמן האחרון?

יכול להיות שייקח זמן עד ש-Google תוסיף את הדף שלכם לאינדקס. כדאי לחכות שבוע לפחות מהרגע ששלחתם sitemap או ביקשתם להוסיף לאינדקס דף כלשהו, לפני שתניחו שיש בעיה כלשהי. אם עשיתם בזמן האחרון שינוי בדף או באתר, כדאי שתבדקו שוב אחרי שבוע ולראות אם הוא עדיין חסר.

שלב 1: מוודאים שהדף או האתר לא מופיעים בתוצאות החיפוש

קודם כול, חשוב לוודא שהדף או האתר אכן לא קיימים באינדקס של Google. הרבה אנשים חושבים שהדף שלהם לא נכלל בתוצאות החיפוש ב-Google, כשלמעשה הדף פשוט מופיע במיקום נמוך בתוצאות. אפשרות אחרת היא שהדף הושמט מהתוצאות בגלל הפרטים הספציפיים של החיפוש שלכם (לדוגמה, אתם משתמשים במכשיר נייד, אבל הדף פועל רק במחשב).

כדי לוודא שהדף לא נכלל:

1. משביתים את החיפוש הבטוח, כי הוא עשוי לסנן את התוצאות.
2. מחפשים ב-Google את האתר או הדף:
   • אם אתר לא נכלל בתוצאות החיפוש: מבצעים חיפוש אתר ספציפי באמצעות התחביר site:your_domain_name
     לדוגמה: site:example.com
   • אם דף לא נכלל בתוצאות החיפוש: מבצעים חיפוש אתר ספציפי באמצעות התחביר site:url_of_page
     לדוגמה: site:example.com/petstore/hamsters או https://site:example.com/petstore/hamsters
3. אם מופיעות תוצאות, זאת אומרת שהדף או האתר נכללים באינדקס:
   • במקרה של אתר, יכול להיות שהאתר עצמו מופיע באינדקס של Google, אבל לא כל הדפים מעודכנים באינדקס. מומלץ להוסיף sitemap כדי לעזור ל-Google למצוא את כל הדפים באתר.
   • במקרה של דף, יש כמה סיבות אפשריות לכך שלא מוצאים אותו בקלות בתוצאות החיפוש:
     • אם דף מסוים מופיע באינדקס אבל הביצועים שלו נמוכים מהצפוי, מומלץ לעיין בהנחיות לאתרים.
     • אם חלה לאחרונה ירידה חדה בדירוג של הדף, אפשר לנסות לאבחן ולפתור את הבעיה שגרמה לכך.
     • אם יש לכם מספר גרסאות של דף מסוים (לדוגמה, גרסה לנייד ולמחשב, או שתי כתובות URL שמפנות לאותו דף), Google תתייחס לאחת מהן כגרסה הקנונית (הרשמית) ולכל השאר ככפילויות. כמו כן, תוצאות החיפוש יפנו רק אל הדף הקנוני. אפשר להשתמש בכלי לבדיקת כתובות URL כדי לבדוק אם הדף נחשב לכפילות.
4. אם האתר או הדף עדיין לא מופיעים בתוצאות החיפוש, עוברים לשלב 2: פתרון הבעיה.

שלב 2: פותרים את בעיית הדף החסר

אחרי שמוודאים שהדף לא מופיע, אפשר לאבחן את הבעיה באופן הבא:

במסגרת ההנחיות האלה, אנחנו מניחים שיש לכם חשבון Search Console כי באמצעות Search Console קל יותר לאבחן בעיות בהוספה לאינדקס.

1. אם האתר או הדף חדשים, יכול להיות שהם לא יופיעו באינדקס כי עוד לא הספקנו לסרוק אותם או להוסיף אותם לאינדקס. חולף זמן מה ממועד הפרסום של דף חדש ועד שאנחנו סורקים אותו, וגם ממועד הסריקה ועד להוספה שלו לאינדקס. משך התהליך תלוי בלא מעט גורמים, ולכן הוא בדרך כלל אורך בין יום-יומיים לבין מספר שבועות. איך Google סורקת את האינטרנט
2. האם קניתם או קיבלתם לאחרונה את האתר הזה ממישהו אחר? ייתכן שקיבלתם אתר שננקטו לגביו פעולות ידניות. בדפי ההיסטוריה שבדוח הפעולות הידניות ובדוח בעיות האבטחה יוצגו כל הפעולות שננקטו לגבי האתר. מומלץ לקרוא את התיעוד שבדוח כדי לראות איך לפתור בעיות שכבר קיימות באתר שנרכש.
3. שיניתם לאחרונה את מבנה האתר, או עברתם לדומיין חדש או ל-https? הדירוג של הדפים שהביצועים שלהם היו טובים עלול להיות נמוך אם היו טעויות במהלך ההעברה. הפתרון: משתמשים בהפניות אוטומטיות מסוג 301 (RedirectPermanent) כדי להפנות אל הכתובת המתאימה את המשתמשים, את Googlebot וסורקים אחרים. (בשרת Apache אפשר לעשות זאת עם קובץ ‎.htaccess; בשרת IIS אפשר לעשות זאת באמצעות מסוף הניהול.) אם עברתם לאחרונה ל-https, צריך לבדוק ששתי הגרסאות של כתובות ה-URL מופיעות ב-Google –‏ http וגם https. מידע נוסף על העברת האתר תוך צמצום ההשפעה על תוצאות החיפוש
4. בודקים אם ננקטו פעולות ידניות לגבי הדף. פעולות ידניות יורידו את דירוג הדף או יסירו אותו לגמרי מתוצאות החיפוש. דוח הפעולות הידניות אמור לספק הנחיות לגבי תיקון הפעולה הידנית. לגבי הסרות מסיבות משפטיות, כדאי לעיין במידע נוסף על בקשות להסרה מסיבות משפטיות ובמדיניות בנושא הסרה.
5. בודקים אם דווחו בעיות אבטחה באתר. בעיות אבטחה עשויות להוריד את דירוג הדף, או לגרום להצגת אזהרה בדפדפן או בתוצאות החיפוש. בדוח בעיות האבטחה יופיעו הנחיות לתיקון הפעולה הידנית.
6. בודקים את הדף באמצעות הכלי לבדיקת כתובות URL:
   • אם בכלי מצוין שהדף לא נוסף לאינדקס
     1. קוראים את התיעוד כדי לגלות מה הסיבה לכך, ואיך לפתור את הבעיה. לפניכם הסיבות הנפוצות ביותר:
        • הדף חסום באמצעות קובץ robots.txt, הוראת noindex או מנגנון אחר, כמו הגנה באמצעות סיסמה. צריך להשתמש באמצעים המתאימים לכל מקרה כדי לבטל החסימה.
        • אם מתוארות בדוח בעיות טכניות אחרות, קוראים את התיעוד כדי לגלות סיבות אפשריות נוספות לחסימת הדף.
        • אם אין שגיאות, והדף לא חסום ל-Google, יכול להיות שיש בעיה ביכולת האיתור בקלות.
     2. שולחים בקשה להוספת הדף לאינדקס באמצעות הכלי לבדיקת כתובות URL.
   • אם בכלי מצוין שהדף נוסף לאינדקס
     • ​בודקים אם אתם (או מישהו אחר) ביקשתם שהאתר או כתובת ה-URL יוסרו מהאינדקס, והבקשה אושרה. פותחים את הכלי להסרת כתובות URL ומחפשים בקשות שאושרו להסרת כתובות URL או אתרים. אם יש כאלה, אפשר לבטל את הבקשה.
     • יכול להיות שהדף הוסר או הושמט מהאינדקס ללא סיבה (יש באינטרנט כמות עצומה של מידע, ו-Google לא מגיעה לכל דף, למרות שאנחנו מנסים). מבקשים מ-Google לסרוק מחדש את הדף שלכם.
     • עדיין נתקלים בבעיות? אפשר להיכנס אל פורום מנהלי האתרים ולהסביר את הבעיה (חשוב להקפיד לתאר את הבעיה באופן מלא, ולכלול קישורים לאתר שלכם).

איך לשפר את היכולת של Google למצוא ולסרוק את האתר

אם נראה ש-Google לא מוצאת את כל הדפים באתר, יכול להיות ש-Google לא מצליחה למצוא את הדפים (בעיית סריקה) או שהיא מוצאת אותם אבל שלא ניתן להבין אותם כראוי (בעיה בהוספה לאינדקס). למידע בסיסי על סריקה והוספה לאינדקס

בעיות סריקה

כדי שאפשר יהיה להוסיף את הדפים שלכם לאינדקס, צריכה להיות ל-Google דרך למצוא אותם. ניתן לעזור ל-Google למצוא את הדפים בדרכים הבאות:

• לשלוח sitemap. הקובץ הזה מגדיר ל-Google בדיוק את הדפים שיש לסרוק. קיימים שירותים רבים לאירוח אתרים שייצרו וישלחו sitemap בשבילכם. כדאי לקרוא את התיעוד של שירות האירוח כדי לבדוק זאת (יש לחפש את המונח "sitemap").
• לוודא שאנשים יודעים על האתר שלכם. Google מגלה אתרים חדשים דרך אתרים קיימים.
• לבנות את הקישורים באתר כך שייאפשרו לגשת לכל רחבי האתר. יש לוודא שניתן להגיע לכל דף באתר דרך קישור אחד או יותר מדף הבית. מומלץ להימנע משימוש בקישורים שנדרשת להם אינטראקציה עם המשתמש, בטכנולוגיית קישורים לא סטנדרטית, בקישורים שמוטמעים בקובצי מדיה או בטכנולוגיות מורכבות אחרות.
• לשלוח בקשה להוספה של דף הבית לאינדקס. אם הדפים מקושרים היטב זה לזה באמצעות קישורים פנימיים, Google תוכל למצוא את כולם מדף הבית.
• קשה לסרוק אתרים שבהם כתובות URL בנויות מפרמטרים ולא מנתיבים או משמות דפים. ל-Google יהיה קל יותר למצוא דף בכתובת example.com/petstore/zebra מאשר דף בכתובת example.com?page=1234.

בעיות בהוספה לאינדקס

ב-SEO – מדריך למתחילים ניתן לקבל הרבה טיפים לשיפור של סריקת האתר וההוספה שלו לאינדקס.

כמו כן, חשוב לוודא שהדפים עומדים בהנחיות הבסיסיות של Google להתאמת תוכן לחיפוש.