У овом чланку је објашњено како да блокирате приступ садржају на сајту.
Неки делови садржаја који објављујете можда нису релевантни за приказивање у Google вестима. Да бисте Google-у ограничили приступ одређеном садржају, блокирајте приступ Google роботским пописивачима, Googlebot-у и Googlebot-у за Вести.
Направите датотеку robots.txt
Користите датотеку robots.txt да бисте имали висок ниво контроле над тиме који делови сајта могу да се појављују у Google претрази и Google вестима. Сазнајте више о датотекама robots.txt.
Приступ можете да блокирате на следеће начине:
-
Да бисте спречили да се сајт појављује у Google вестима, блокирајте приступ Googlebot-у за Вести помоћу датотеке robots.txt.
-
Да бисте спречили да се сајт појављује у Google вестима и Google претрази, блокирајте приступ Googlebot-у помоћу датотеке robots.txt.
Морате да омогућите нашем пописивачу приступ датотеци robots.txt да бисмо видели да ли сте навели одређене одељке сајта које не желите да пописујемо.
Направите метаознаку
Можете да додате метаознаке на HTML страницу. Метаознаке говоре претраживачима која ограничења се примењују при приказу страница у резултатима претраге. Сазнајте како да блокирате индексирање у претрази помоћу метаознака.
Ево неких уобичајених метаознака које можете да додате на HTML странице:
-
Да бисте спречили да се одређени чланци са сајта појављују у Google вестима, блокирајте приступ Googlebot-у за Вести помоћу следеће метаознаке:
<meta name="Googlebot-News" content="noindex, nofollow">. -
Да бисте спречили да се одређени чланци са сајта појављују у Google вестима и Google претрази, блокирајте приступ Googlebot-у помоћу следеће метаознаке:
<meta name="googlebot" content="noindex, nofollow">. -
Да бисте спречили све роботе да индексирају одређене чланке са сајта, користите следећу метаознаку:
<meta name="robots" content="noindex, nofollow">. -
Да бисте спречили роботе да пописују слике из одређеног чланка, користите следећу метаознаку:
<meta name="robots" content="noimageindex">. -
Да бисте нам јавили да чланак треба да се уклони из Google индекса у одређено време, користите следећу метаознаку:
<meta name="googlebot" content="unavailable_after: 25-Aug-2011 15:00:00 EST">. -
Наведите време и датум у формату RFC 850. Ова метаознака се третира као захтев за уклањање. Потребан је отприлике један дан после датума уклањања да страница нестане из резултата претраге. Међутим, да би ознака функционисала исправно, мора да буде уврштена у чланак при првом пописивању.
-
Постоје друге опције за ограничавање садржаја који се приказује у резултату претраге. Сазнајте више у документацији за програмере.
Спецификације HTTP заглавља
Упутства за роботе можете да наведете и у HTTP заглављу одговора. Да бисте сазнали више, прочитајте о спецификацијама HTTP заглавља.
Напомена: Google се придржава најрестриктивнијег тумачења избора робота.