Google에서는 정기적으로 모바일 및 데스크톱 제품 페이지 및 이미지를 크롤링하여 품질 문제를 확인합니다. Google에서 크롤링을 수행할 수 없는 경우 등록정보에 상품을 표시할 수 없습니다.
또한 방문 페이지의 경우 상품의 모바일 또는 데스크톱 방문 페이지를 가져오는 동안 크롤링 오류가 감지되면 Google은 방문 페이지에 액세스할 수 있을 때까지 휴대기기 및 데스크톱 기기 모두에서 해당 상품을 비승인합니다.
이 페이지의 내용
이번 결정의 이유
제품 크롤링 문제가 발생하는 가장 일반적인 원인은 다음과 같습니다.
- 페이지를 찾을 수 없음(404) 오류: 제공된 URL이 잘못되었거나 깨져서 404 오류가 표시됩니다. URL이 정확하고 웹사이트가 현재 게시되어 있는지 확인하세요.
- 서버의 robots.txt에서 액세스를 허용하지 않음: robots.txt 파일이 Google 크롤러 액세스를 차단하고 있습니다. Google은 광고에 AdsBot-Google을 사용하고 자연 검색에 Googlebot을 사용합니다. 하나가 허용되더라도 다른 하나는 차단될 수 있습니다. 웹마스터에게 AdsBot-Google과 Googlebot이 모두 방문 페이지에 액세스할 수 있도록 파일을 업데이트해 달라고 요청하세요.
- 잘못된 URL: URL에 잘못된 문자가 포함되어 있거나 올바른 링크 형식이 아닙니다.
참고: 문제를 해결한 후 등록정보에 제품이 새로 표시되는 데 최대 48시간이 걸릴 수 있습니다.
기타 일반적인 문제
Google에서 페이지를 크롤링하지 못하는 이유는 그 밖에도 여러 가지가 있습니다.
- 페이지에 인증 필요: 일종의 인증 프로토콜이 제공된 URL을 보호하므로 Google이 콘텐츠에 액세스할 수 없습니다.
- HTTP 4xx 및 5xx 응답: 웹사이트를 호스팅하는 서버가 HTTP 오류를 반환하여 Google이 콘텐츠에 액세스할 수 없습니다.
- 호스트 이름을 확인할 수 없음: 서버의 호스트 이름을 IP 주소에서 확인할 수 없으므로 페이지에 액세스할 수 없습니다.
- 잘못된 형식의 HTTP 응답: 서버로부터의 응답이 깨져서 표시되었습니다.
- 방화벽, 지역 제한 또는 비공개 IP: 웹사이트가 방화벽 뒤에 있거나, 지역 제한이 있거나, Google 크롤러를 차단하는 비공개 IP를 사용하고 있을 수 있습니다. 특정 지역을 제한하는 경우 Google이 미국에서 운영되는 경우가 많으므로 미국에서의 크롤링을 허용해야 합니다. 웹마스터 또는 호스팅 제공업체에 AdsBot-Google 사용자 에이전트를 허용하도록 방화벽 및 서버 설정을 업데이트해 달라고 요청하세요.
- 네트워크 오류: 크롤링 중에 네트워크 연결 문제가 발생했습니다.
- 페이지 읽기 시간 초과: 서버가 제때 응답하지 않아 이 제품의 크롤링이 중지되었습니다.
- 서버 리디렉션이 너무 많음: 서버가 요청을 너무 많이 리디렉션하여 크롤링이 실패했습니다.
- 리디렉션 오류: 서버에서 크롤링을 방해하는 잘못되거나 비어 있거나 너무 긴 URL을 반환했습니다.
- robots.txt에 연결할 수 없음: robots.txt 파일에 액세스할 수 없어 크롤링이 중단되었습니다. robots.txt 파일을 사용하여 제품 크롤링 문제를 해결하는 방법에 대해 자세히 알아보세요.
- 지역 방문 페이지에 액세스할 수 없음: 지역별 재고 및 가격 부가기능을 사용하는 경우 지역 ID가 있는 모든 방문 페이지를 크롤링할 수 있는지 확인합니다. 예를 들어 다음과 같은 URL은 Google이 액세스할 수 있어야 합니다.
- https://mystorewebsite.com/p/myproductlandingpage?region_id=123456
- https://mystorewebsite.com/p?offer=myproduct®ion_id=123456