Google accesează cu crawlere paginile mobile și pentru desktop și imaginile produselor tale, ca procedură de rutină, pentru a detecta eventualele probleme de calitate. Dacă nu putem realiza aceste accesări cu crawlere, nu îți vom putea afișa articolele în anunțurile pentru Cumpărături Google.
În plus, pentru paginile de destinație, dacă detectăm erori de accesare cu crawlere în timp ce preluăm pagina de destinație mobilă sau pentru desktop a unui articol, Google va respinge articolul atât pentru dispozitivele mobile, cât și pentru dispozitivele desktop, până ce vom putea accesa pagina de destinație.
Cele mai frecvente cauze ale problemelor legate de accesarea cu crawlere a produselor sunt:
- eroarea Pagina nu a fost găsită (404): ne-ai indicat un URL incorect (de ex. adresa URL conține o eroare), iar pagina a returnat o eroare de tip Pagina nu a fost găsită (404). Asigură-te că adresa URL este corectă și site-ul tău este live.
- fișierul robots.txt al serverului respinge accesul: ai adăugat pe server un fișier robots.txt care interzice accesarea cu crawlere. Nu putem accesa cu crawlere pagini care conțin fișiere și interdicții de aceste tipuri. Pentru a rezolva problema, configurează fișierul robots.txt pentru a permite accesarea cu crawlere.
- Adresă URL nevalidă: adresa dvs. URL conține caractere nevalide sau nu are formatul unui link valid.
Există o serie de alte probleme care pot și să împiedice Google să acceseze cu crawlere pagina dvs.
Alte probleme uzuale- Pagina solicită autentificarea: adresa URL specificată este protejată de un anumit tip de protocol de autentificare care împiedică Google să îi acceseze conținutul.
- Răspuns HTTP 4xx; răspuns HTTP 5xx: serverul care găzduiește site-ul tău web a afișat o eroare HTTP care ne-a împiedicat să accesăm conținutul.
- Numele gazdei nu poate fi rezolvat: nu am reușit să rezolvăm numele de gazdă al serverului tău la o adresă IP. Prin urmare, nu am putut accesa pagina.
- Răspuns HTTP cu format incorect: răspunsul de la serverul dvs. a fost ilizibil.
- IP privat: site-ul dvs. este găzduit în spatele unui firewall sau al unui router și nu am reușit să îl accesăm.
- Eroare de rețea: a survenit o eroare de rețea de tip necunoscut.
- Expirarea timpului limită la citirea paginii: afișarea paginii de pe server a durat prea mult timp și am abandonat accesarea cu crawlere a produsului respectiv.
- Serverul redirecționează prea frecvent: serverul tău a redirecționat crawlerul de mai multe ori și a trebuit să fie abandonat.
- Adresa URL de redirecționare este prea lungă; adresa URL de redirecționare este necompletată; adresa URL de redirecționare este incorectă: adresa URL de redirecționare a serverului tău nu a fost validă și nu am putut să o urmăm.
- Fișierul robots.txt de pe server nu poate fi găsit; expirarea timpului limită la citirea fișierului robots.txt: nu am reușit să citim fișierul robots.txt și, prin urmare, nu am putut accesa cu crawlere pagina. Poți afla mai multe despre protocolul de excludere a aplicațiilor robot aici.