Sisällön indeksointirobotti

Indeksointirobotti eli indeksoija tai robotti on ohjelmisto, jolla Google käsittelee ja indeksoi verkkosivujen sisältöä. Sisällön indeksointirobotti käy sivustollasi selvittääkseen, millaista sisältöä sillä on, jotta sivustolle voidaan lisätä osuvia mainoksia.

Tärkeitä tietoja sisällön indeksointirobotista:

• Indeksointiraportti päivittyy viikoittain.
  Indeksointi tapahtuu automaattisesti. Emme voi pyynnöstäkään indeksoida sivuja useammin.
• Sisällön indeksointirobotti ei ole sama kuin Googlen indeksointirobotti.
  Indeksointirobotit ovat erilliset, mutta niillä on yhteinen välimuisti. Näin vältämme sen, että kumpikin indeksointirobotti pyytää samoja sivuja. Tämä säästää kaistanleveyttäsi. Vastaavasti myös Search Consolen indeksointirobotti on erillinen indeksoija.
• Sisällön indeksointirobotin ongelmien ratkaiseminen ei ratkaise Googlen indeksoinnissa esiintyviä ongelmia.
  Indeksointioikeudet-sivulla mainittujen ongelmien ratkaiseminen ei vaikuta millään tavalla sijoitteluun Googlen hakutuloksissa.
  Huom. Lisätietoja sivuston sijoituksesta Googlessa on artikkelissa Sivuston sisällyttäminen Googlen hakutuloksiin.
• Indeksointirobotti indeksoi sivustot URL-osoitteen mukaan.
  Indeksointirobotti käy esimerkiksi osoitteissa site.com ja www.site.com erikseen. Se ei kuitenkaan laske osoitteita site.com ja site.com/#anchor eri osoitteiksi.
• Indeksointirobotti ei käy sivuilla tai hakemistoissa, joille pääsy on estetty robots.txt-tiedostossa.
  Sekä Googlen että AdMob Mediapartnersin indeksointirobotit noudattavat robots.txt-tiedoston sisältöä. Jos robot.txt-tiedostossa estetään pääsy tietyille sivuille tai tiettyihin hakemistoihin, niitä ei indeksoida.
  Huom. Jos mainoksia näkyy sivuilla, jotka on suljettu pois indeksoinnista User-agent: * ‑merkinnällä, sisällön indeksointirobotti indeksoi kyseiset sivut tästä huolimatta. Jos haluat estää sisällön indeksointirobottia pääsemästä sivuillesi, lisää robots.txt-tiedostoon User-agent: Mediapartners-Google ‑merkintä.

  Lue lisää sivujesi indeksointioikeuden antamisesta indeksointirobotillemme.
• Indeksointirobotti yrittää päästä vain niihin URL-osoitteisiin, joissa mainostagimme on otettu käyttöön.
  Vain sellaisten sivujen, joilla näkyy Google-mainoksia, tulee lähettää pyyntöjä järjestelmiimme, ja vain sellaiset sivut indeksoidaan.
• Indeksointirobotti yrittää päästä sivuille, joilla on käytössä uudelleenohjaus.
  Jos sivustolla on niin sanottuja alkuperäisiä sivuja, jotka uudelleenohjaavat toisille sivuille, indeksointirobotin on päästävä alkuperäisille sivuille voidakseen todeta, että uudelleenohjaus on käytössä. Tästä syystä pääsylokeissa näkyy indeksointirobotin käynti alkuperäisillä sivuilla.
• Emme voi vaikuttaa siihen, kuinka usein indeksointirobottimme indeksoivat sivustosi sisällön.
  Tällä hetkellä robottimme indeksoivat sivustoja automaattisesti. Jos teet muutoksia sivullesi, muutokset saattavat näkyä hakemistossamme vasta 1–2 viikon kuluttua.