이 도움말에서는 사이트의 콘텐츠 액세스를 차단하는 방법을 안내합니다.
게시하는 콘텐츠 중 일부는 Google 뉴스 표시와 관련이 없을 수 있습니다. Google의 로봇 크롤러인 Googlebot 및 Googlebot-News의 액세스를 차단하여 특정 콘텐츠에 관한 Google의 액세스를 제한할 수 있습니다.
robots.txt 파일 만들기
robots.txt 파일을 사용하면 사이트의 어떤 부분이 Google 검색 및 Google 뉴스에 표시될지 전체적으로 제어할 수 있습니다. robots.txt 파일 자세히 알아보기
다음 방법을 사용하면 액세스를 차단할 수 있습니다.
-
사이트가 Google 뉴스에 표시되지 않게 하려면 robots.txt 파일을 이용해 Googlebot 뉴스의 액세스를 차단하세요.
-
사이트가 Google 뉴스 및 Google 검색에 표시되지 않게 하려면 robots.txt 파일을 이용해 Googlebot의 액세스를 차단하세요.
사이트에서 크롤링되지 않기를 원하는 특정 섹션을 명시했다면 Google에서 이를 알 수 있도록 robots.txt 파일에 액세스할 권한을 Google 크롤러에 부여해야 합니다.
메타 태그 만들기
메타 태그를 HTML 페이지에 추가할 수 있습니다. 메타 태그는 검색결과에 페이지를 표시할 때 어떤 제한을 적용해야 할지 검색엔진에 알려 줍니다. 메타 태그로 검색 색인 생성을 차단하는 방법 자세히 알아보기
다음은 HTML 페이지에 추가할 수 있는 몇 가지 일반적인 메타 태그입니다.
-
사이트의 특정 기사가 Google 뉴스에 표시되지 않게 하려면 다음 메타 태그를 사용하여 Googlebot 뉴스의 액세스를 차단합니다.
<meta name="Googlebot-News" content="noindex, nofollow"> -
사이트의 특정 기사가 Google 뉴스 및 Google 검색에 표시되지 않게 하려면 다음 메타 태그를 사용하여 Googlebot의 액세스를 차단합니다.
<meta name="googlebot" content="noindex, nofollow"> -
모든 로봇이 사이트에 게시된 특정 기사의 색인을 생성하지 못하게 하려면 다음 메타 태그를 사용합니다.
<meta name="robots" content="noindex, nofollow"> -
로봇이 특정 기사의 이미지를 크롤링하지 못하게 하려면 다음 메타 태그를 사용합니다.
<meta name="robots" content="noimageindex"> -
특정 시점에 기사가 Google 색인에서 삭제되어야 한다고 알리려면 다음 메타 태그를 사용합니다.
<meta name="googlebot" content="unavailable_after: 25-Aug-2011 15:00:00 EST"> -
시간과 날짜를 RFC 850 형식으로 지정하세요. 이 메타 태그는 삭제 요청으로 간주됩니다. 검색결과에서 페이지가 삭제되는 데는 삭제일 후 하루 정도가 소요됩니다. 그러나 태그가 제대로 기능하려면 기사가 최초로 크롤링될 때 포함되어 있어야 합니다.
-
검색결과에 표시되는 콘텐츠를 제한할 때 다른 옵션을 사용할 수 있습니다. 개발자 문서에서 자세한 내용을 확인하세요.
HTTP 헤더 사양
HTTP 응답 헤더에서 로봇에 지침을 제공할 수도 있습니다. HTTP 헤더 사양에서 자세한 내용을 확인하세요.
중요: Google은 크롤러의 선택 중 가장 제한적인 해석을 따릅니다.