Šajā rakstā ir paskaidrots, kā bloķēt piekļuvi saturam jūsu vietnē.
Daļa jūsu publicētā satura var nebūt atbilstoša rādīšanai Google ziņās. Varat ierobežot Google piekļuvi noteiktam saturam, bloķējot piekļuvi Google robotu rāpuļprogrammām — Googlebot un Googlebot ziņas.
Faila robots.txt izveide
Izmantojiet failu robots.txt, lai precīzi noteiktu, kuras vietnes sadaļas var tikt parādītas pakalpojumos Google meklēšana un Google ziņas. Uzziniet vairāk par failiem robots.txt.
Piekļuvi varat bloķēt tālāk norādītajos veidos.
-
Lai novērstu jūsu vietnes rādīšanu pakalpojumā Google ziņas, bloķējiet robota Googlebot ziņas piekļuvi, izmantojot failu robots.txt.
-
Lai novērstu jūsu vietnes rādīšanu pakalpojumos Google ziņas un Google meklēšana, bloķējiet robota Googlebot piekļuvi, izmantojot failu robots.txt.
Lai mēs varētu uzzināt, vai savā vietnē esat norādījis konkrētas sadaļas, kuras nav jāpārmeklē, piešķiriet mūsu rāpuļprogrammai piekļuvi failam robots.txt.
Metataga izveide
HTML lapai varat pievienot metatagus. Metatagi norāda meklētājprogrammām, kuri ierobežojumi ir jāņem vērā, rādot meklēšanas rezultātu lapas. Uzziniet, kā bloķēt meklēšanas rezultātu iekļaušanu rādītājā, izmantojot metatagus.
Tālāk ir norādīti daži bieži lietoti metatagi, ko varat pievienot savām HTML lapām.
-
Lai noteikti jūsu vietnē publicētie raksti netiktu rādīti pakalpojumā Google ziņas, bloķējiet robota Googlebot ziņas piekļuvi, izmantojot šādu metatagu:
<meta name="Googlebot-News" content="noindex, nofollow">. -
Lai noteikti jūsu vietnē publicētie raksti netiktu rādīti pakalpojumos Google ziņas un Google meklēšana, bloķējiet robota Googlebot piekļuvi, izmantojot šādu metatagu:
<meta name="googlebot" content="noindex, nofollow">. -
Lai visiem robotiem liegtu noteiktu jūsu vietnē publicētu rakstu iekļaušanu rādītājā, izmantojiet šādu metatagu:
<meta name="robots" content="noindex, nofollow">. -
Lai liegtu robotiem noteiktā rakstā pārmeklēt attēlus, izmantojiet šādu metatagu:
<meta name="robots" content="noimageindex">. -
Paziņojiet mums, ka raksts noteiktā laikā jādzēš no Google rādītāja, izmantojot šo metatagu:
<meta name="googlebot" content="unavailable_after: 25-Aug-2011 15:00:00 EST">. -
Norādiet laiku un datumu RFC 850 formātā. Šis metatags tiek apstrādāts kā noņemšanas pieprasījums. Lapa meklēšanas rezultātos vairs netiks rādīta aptuveni dienu pēc norādītā noņemšanas datuma. Lai šis tags darbotos pareizi, tam ir jābūt ievietotam jūsu rakstā jau pirmajā pārmeklēšanas reizē.
-
Ir arī citi veidi, kā ierobežot meklēšanas rezultātos rādīto saturu. Uzziniet vairāk izstrādātāja dokumentācijā.
HTTP galvenes specifikācijas
Norādījumus robotiem varat iekļaut arī HTTP atbildes galvenē. Lai uzzinātu vairāk, lasiet rakstu par HTTP lapas galvenes specifikācijām.
Svarīgi! Google serveri attiecībā uz robotiem paredzētajiem iestatījumiem ņem vērā komandas, kas nosaka vislielākos ierobežojumus.