Artiklis selgitatakse, kuidas blokeerida juurdepääs teie saidil olevale sisule.
Osa avaldatavast sisust ei pruugi Google Newsis esitamiseks sobida. Võite piirata Google'i juurdepääsu mõnele sisule, blokeerides juurdepääsu Google'i roomamisrobotitele Googlebot ja Googlebot-News.
Faili robots.txt loomine
Failiga robots.txt saate täpsemini juhtida, millised saidi osad võivad Google'i otsingus ja Google Newsis ilmuda. Vaadake lisateavet robots.txt-failide kohta.
Juurdepääsu blokeerimiseks võite teha järgmist.
-
Selleks et keelata saidi ilmumine Google Newsis, blokeerige failiga robots.txt juurdepääs robotile Googlebot-News.
-
Kui soovite keelata saidi ilmumise nii Google Newsis kui ka Google'i otsingus, blokeerige failiga robots.txt juurdepääs robotile Googlebot.
Lubage meie roomaja jaoks juurdepääs oma failile robots.txt, et näeksime, kas olete määranud saidi jaotised, mille roomamise soovite keelata.
Metasildi loomine
Võite lisada HTML-lehele metasildid. Metasildid ütlevad otsingumootoritele, millised piirangud kehtivad otsingutulemustes lehtede kuvamisele. Vaadake, kuidas otsingu indekseerimise funktsiooni metasiltidega blokeerida.
Siin on mõned levinumad metasildid, mille saate HTML-lehtedele lisada.
-
Selleks et keelata saidil olevate konkreetsete artiklite kuvamine Google Newsis, blokeerige juurdepääs robotile Googlebot-News, kasutades järgmist metasilti:
<meta name="Googlebot-News" content="noindex, nofollow">. -
Selleks et keelata saidil olevate konkreetsete artiklite kuvamine Google Newsis ja Google'i otsingus, blokeerige juurdepääs robotile Googlebot, kasutades järgmist metasilti:
<meta name="googlebot" content="noindex, nofollow">. -
Selleks et keelata saidil olevate konkreetsete artiklite indekseerimine kõigile robotitele, kasutage järgmist metasilti:
<meta name="robots" content="noindex, nofollow">. -
Selleks et keelata robotitel konkreetse artikli piltidel roomamine, kasutage järgmist metasilti:
<meta name="robots" content="noimageindex">. -
Selleks et teavitada meid artiklist, mis tuleks Google'i indeksist konkreetsel ajal eemaldada, kasutage järgmist metasilti:
<meta name="googlebot" content="unavailable_after: 25-Aug-2011 15:00:00 EST">. -
Määrake kellaaeg ja kuupäev vormingus RFC 850. Seda metasilti tõlgendatakse kui eemaldamistaotlust. Leht kaob otsingutulemustest ühe päeva jooksul pärast eemaldamiskuupäeva. Selleks et silt toimiks õigesti, peab see esimesel roomamisel artiklis sisalduma.
-
Otsingutulemuses kuvatava sisu piiramiseks on ka muid võimalusi. Lisateavet saate arendaja dokumentatsioonist.
HTTP-päise spetsifikatsioonid
Võite anda robotitele juhiseid ka HTTP vastuse päises. Vaadake lisateavet HTTP-päise spetsifikatsioonidest.
Tähtis. Google järgib teie roboti valiku kõige piiravamat tõlgendust.