robots.txt 소개

업데이트된 robots.txt를 Google에 제출

robots.txt 테스터 도구의 제출 기능을 사용하면 Google을 쉽게 실행시켜 사이트의 새로운 robots.txt 파일을 더욱 신속하게 크롤링하고 색인 생성하도록 요청할 수 있습니다. 아래 단계를 따라 robots.txt 파일의 변경 사항을 Google에 업데이트하고 알려주시기 바랍니다.

1. robots.txt 편집기 오른쪽 하단에서 제출을 클릭합니다. 이렇게 하면 제출 대화상자가 열립니다.

2. 제출 대화 상자에서 다운로드를 클릭하여 robots.txt 테스터 페이지에서 수정된 robots.txt 코드를 다운로드합니다.

3. 새로운 robots.txt 파일을 robots.txt로 지정한 텍스트 파일 형식으로 도메인의 루트에 업로드합니다(robots.txt 파일의 URL은 /robots.txt이어야 합니다).

도메인의 루트에 파일을 업로드할 권한이 없는 경우 도메인 관리자에게 문의하여 변경해야 합니다.

예를 들어 사이트의 홈페이지가 subdomain.example.com/site/example/에 있다면 robots 파일 subdomain.example.com/robots.txt를 업데이트하지 못할 가능성이 높습니다. 이 경우 example.com/ 소유자에게 문의하여 필요에 따라 robots.txt 파일을 변경해야 합니다.

4. 라이브 버전 확인을 클릭하여 robots.txt 라이브 버전이 Google에서 크롤링하기 원하는 버전인지 확인합니다.

5. 라이브 버전 제출을 클릭하여 robots.txt 파일의 변경 사항을 Google에 알리고 변경된 버전을 크롤링하도록 요청합니다.

6. 브라우저에서 페이지를 새로고침해서 Google이 최신 버전을 크롤링했는지 확인하여 도구 편집기를 업데이트하고 robots.txt 라이브 코드를 확인합니다. 페이지를 새로고침한 후 텍스트 편집기 위에 있는 드롭다운 메뉴를 클릭하여 robots.txt 파일의 최신 버전을 처음 인식한 시점을 보여주는 타임스탬프를 조회할 수 있습니다.

도움이 되었나요?
어떻게 하면 개선할 수 있을까요?