Nicht crawlbare Landingpages in Kampagnen mit dynamischen Anzeigengruppen – Fehlerbehebung

Schritt 1: Nicht crawlbare URL suchen

Nicht crawlbare Seiten können sich auf drei Arten auf dynamische Suchanzeigen auswirken:

• Sie haben den Ausrichtungstyp URL stimmt überein mit ausgewählt und Ihre URL ist nicht crawlbar: In diesem Fall wird für das dynamische Anzeigenziel eine Meldung angezeigt, dass es abgelehnt wurde, da die Seite nicht crawlbar ist.
• Sie verwenden Seitenfeeds und eine URL im Feed ist nicht crawlbar: In diesem Fall wird die Meldung, dass das Ziel abgelehnt wurde, da die Seite nicht crawlbar ist, in der gemeinsam genutzten Bibliothek in der Zeile für diese URL angezeigt.
• Sie verwenden eine andere Ausrichtungsmethode und eine URL wird nicht gecrawlt oder kann nicht gecrawlt werden: In diesem Fall wird keine Fehlermeldung angezeigt, da Google Ads keine Kenntnis davon hat. Wenn eine URL, die Sie als Ausrichtungsziel festgelegt haben, keine Zugriffe erhält, können Sie sie zur Fehlerbehebung zuerst als Ziel für URL stimmt überein mit oder für Seitenfeeds auswählen. In diesem Fall werden entweder Zugriffe für die URL generiert oder Sie erhalten eine Fehlermeldung, die Aufschluss darüber gibt, warum es keine Zugriffe gibt.

Schritt 2: Sicherstellen, dass der Google Adsbot die Landingpage crawlen kann

1. Kopieren Sie die URL und fügen Sie sie in die Adressleiste Ihres Webbrowsers ein.
2. Fügen Sie am Ende des Domainnamens /robots.txt ein und drücken Sie dann die Eingabetaste. Lautet Ihre Landingpage beispielsweise http://www.example.com/ordner1/ordner2/, überprüfen Sie, welche Robots die Domain crawlen können, indem Sie die URL http://www.example.com/robots.txt aufrufen.
3. Suchen Sie die Zeile User-agent: Adsbot-Google.
   • Sollte keine solche Zeile vorhanden sein, wenden Sie sich an den Webentwickler, damit er sie hinzufügt.
   • Ist die Seite leer, bitten Sie den Webentwickler, die robots.txt-Datei auf der Domain einzufügen.
   • Falls die Zeile User-agent: AdsBot-Google vorhanden ist, darf die darauffolgende Zeile nicht Disallow: / lauten. Außerdem darf der Google AdsBot nicht durch eine andere Zeile in der Datei eingeschränkt sein. Weitere Informationen zu robots.txt-Dateien und Google-Crawlern
4. Wenn es sich bei der Landingpage um eine Subdomain handelt, muss es für diese Subdomain eine eigene robots.txt-Datei geben, zum Beispiel https://subdomain.domain.com/robots.txt. Sorgen Sie dafür, dass auch in dieser robots.txt-Datei User-agent: Adsbot-Google zugelassen wird.
5. Öffnen Sie die Quelle der URL. In Chrome geben Sie hierzu view-source:THE_URL in die Adressleiste ein. Lautet Ihre Landingpage beispielsweise http://www.example.com/ordner1/ordner2/, sehen Sie unter der folgenden Adresse, welche Robots die Domain crawlen können: view-source:http://www.example.com/ordner1/ordner2/.
6. Suchen Sie den String AdsBot-Google.
   • Falls dieser nicht vorhanden ist, wird das Problem nicht dadurch verursacht.
   • Sollte der String in einem Tag wie <meta name="Adsbot-Google" content="noindex" /> enthalten sein, bitten Sie den Webentwickler, es zu entfernen. Weitere Informationen zu den Meta-Tags, die von Google berücksichtigt werden
7. Testen Sie Ihre Landingpage mit einem Crawler-Simulationstool. Mit dem URL-Prüftool der Google Search Console können Sie sehen, wie Google Ihre Seite crawlt. So lässt sich feststellen, ob die Seite zugänglich ist und ob sie den Statuscode „200 OK“ zurückgibt. So wird proaktiv nach Crawling-Problemen gesucht, die zu Ablehnungen führen.

Andere mögliche Gründe dafür, dass eine Landingpage nicht crawlbar ist

Falls der Google Adsbot für das Crawlen der Landingpage verwendet werden kann (User-agent: Adsbot-Google ist bereits in der Datei robots.txt der Website enthalten), gibt es möglicherweise einen anderen Grund dafür, dass sich die Seite nicht crawlen lässt:

• Die Landingpage wird nicht geladen oder gibt einen Fehler zurück. Wenn Sie die Seite in einem Webbrowser öffnen und ein HTTP-Fehler angezeigt wird, z. B. „404 Not Found“ (nicht gefunden), „403 Forbidden“ (Zugriff verweigert), „500 Internal Server Error“ (interner Serverfehler) oder ein DNS-Fehler, bedeutet das, dass der Server Ihrer Website den Zugriff verhindert. Auch wenn die Seite für Sie geladen wird, kann sie für die Crawler von Google blockiert sein. Wenden Sie sich an den Webentwickler der Website, um sicherzustellen, dass die Landingpage für den Google AdsBot zugänglich ist und den Statuscode „200 OK“ zurückgibt. Sie sollten Serverlogs und Konfigurationen prüfen, um sicherzustellen, dass die Crawler von Google nicht durch Firewalls oder andere Sicherheitseinstellungen (z. B. Cloudflare) blockiert werden.
• Der Nutzer muss sich auf der Landingpage anmelden. Alle Landingpages von Anzeigen müssen öffentlich zugänglich sein. Verwenden Sie eine andere Landingpage oder bitten Sie den Webentwickler, die Seite so zu ändern, dass keine Anmeldung mehr erforderlich ist.
• Auf der Landingpage sind zu viele Weiterleitungen vorhanden. Landingpages dürfen maximal 10 Weiterleitungen umfassen. Bitten Sie Ihren Webentwickler, die Zahl der Weiterleitungen zu verringern.