אם שיניתם את קובץ ה-robots.txt של האתר כדי למנוע מסורק התוכן להוסיף את הדפים שלכם לאינדקס, לא נוכל להציג מודעות Google בדפים האלה.
כדי לעדכן את קובץ ה-robots.txt כך שיעניק לסורק גישה לדפים האלו, צריך להסיר את שתי שורות הטקסט הבאות מהקובץ:
User-agent: Mediapartners-Google
Disallow: /
השינוי הזה מאפשר לסורק להוסיף לאינדקס את תוכן האתר ולהציג מודעות Google באתר.
הערה: יכול להיות שהשינויים שתבצעו בקובץ ה-robots.txt לא יבואו לידי ביטוי באינדקס עד שהסורקים שלנו ינסו להיכנס שוב לאתר.