Themen in diesem Artikel
Ursache dieses Problems
Für einige Ihrer Produkte wird über das Attribut Link [link] eine Landingpage angegeben, die von Google nicht gecrawlt werden kann, weil die Datei „robot.txt“ das Herunterladen der Landingpage durch den Google-Crawler verhindert. Diese Produkte werden abgelehnt und erscheinen erst wieder in Shopping-Anzeigen und kostenlosen Produkteinträgen, wenn wir die Landingpage crawlen können.
Problembehebung
Aktualisieren Sie die Datei „robots.txt“ auf Ihrem Webserver, damit der Google-Crawler die angegebenen Landingpages abrufen kann. Die robots.txt-Datei befindet sich normalerweise im Stammverzeichnis des Webservers (Beispiel: http://ihrunternehmen.de/robots.txt).
Damit Google auf Ihre gesamte Website zugreifen kann, achten Sie darauf, dass Ihre Datei „robots.txt“ sowohl dem User-Agent „Googlebot“ (für Landingpages) als auch dem User-Agent „Googlebot-image“ (für Bilder) das vollständige Crawlen Ihrer Website erlaubt..
Die folgenden Änderungen der Datei „robots.txt“ erlauben dem Crawler, Ihre komplette Website zu untersuchen:
User-agent: Googlebot
Disallow:
User-agent: Googlebot-image
Disallow:
Weitere Informationen dazu, wie Sie „robots.txt“ konfigurieren können, finden Sie in der Dokumentation unter Einführung zu robots.txt-Dateien. Sie können Ihre aktuelle Konfiguration mit dem URL-Prüftool testen.
Produkte einzeln direkt im Merchant Center korrigieren
Klicken Sie im Merchant Center auf Produkte und wählen Sie den Tab Überprüfung erforderlich aus.
Mithilfe des Symbols Filtern
über der Tabelle finden Sie alle Produkte, die von diesem Problem betroffen sind.
Klicken Sie auf den Titel des Produkts, das Sie korrigieren möchten, und dann auf Produkt bearbeiten.
Aktualisieren Sie die robots.txt-Datei auf Ihrem Webserver, damit der Google-Crawler die bereitgestellten Landingpages für die betroffenen Produkte abrufen kann.
Wählen Sie Speichern aus.
Mehrere Produkte gleichzeitig korrigieren
Klicken Sie im Merchant Center auf Produkte und wählen Sie den Tab Überprüfung erforderlich aus.
Mithilfe des Symbols Filtern
über der Tabelle finden Sie alle Produkte, die von diesem Problem betroffen sind.
Klicken Sie auf das Symbol Herunterladen
, um eine Liste (.csv) aller Produkte herunterzuladen, die von allen Problemen oder diesem konkreten Problem betroffen sind.
Vergleichen Sie die heruntergeladene Liste mit den hochgeladenen Produktdaten und aktualisieren Sie die robots.txt-Datei auf Ihrem Webserver, damit der Google-Crawler die bereitgestellten Landingpages für die betroffenen Produkte abrufen kann.
Laden Sie die korrigierten Produktdaten mit der von Ihnen gewählten Uploadmethode in das Merchant Center hoch.
Weiteres Vorgehen
Nachdem Sie die erforderlichen Änderungen vorgenommen haben, prüfen Sie, ob das Problem behoben wurde. Ist dies der Fall, wird es nicht mehr auf der Seite Überprüfung erforderlich aufgeführt.
Hinweis: Es kann einige Zeit dauern, bis Ihre Änderung auf der Seite Überprüfung erforderlich angezeigt wird.
Wenn Sie diese Probleme behoben und Ihre Produkte über einen neuen Feedupload oder über die Content API aktualisiert haben, werden die Produkte nicht mehr abgelehnt – allerdings erst nach einigen Tagen. Diese Zeit brauchen wir, um zu prüfen, ob wir die bereitgestellten Landingpages jetzt crawlen können. Erst dann erscheinen die Produkte wieder in Shopping-Anzeigen und Einträgen. Um diesen Vorgang zu beschleunigen, können Sie die Crawling-Frequenz von Google erhöhen.