A tartalomfeltérképező robot

A feltérképező robot – vagy csak egyszerűen robot – a Google olyan szoftvere, amellyel feldolgozza és indexeli a weboldalak tartalmát. A tartalomfeltérképező robot felkeresi az Ön webhelyét, és meghatározza annak tartalmát, hogy releváns hirdetéseket jeleníthessünk meg.

Íme néhány fontos tudnivaló a tartalomfeltérképező robotról:

• A feltérképező robot jelentése hetente frissül.
  Mivel a feltérképezés automatikusan zajlik, nem tudjuk teljesíteni a gyakoribb feltérképezésre vonatkozó kéréseket.
• A tartalomfeltérképező robot nem azonos a Google feltérképező robotjával.
  A két robot el van különítve, de közös gyorsítótárat használ. Ezzel elkerülhető, hogy mindkét robot ugyanazt az oldalt kérelmezze, így a megjelenítők számára nagyobb sávszélesség marad. A Search Console feltérképező robotja szintén elkülönítetten működik.
• A tartalomfeltérképező robottal kapcsolatos problémák megoldása nem oldja meg a Google feltérképező robotjával kapcsolatos problémákat.
  A Robot hozzáférése oldalon felsorolt problémák megoldása nincs hatással az Ön Google keresési eredményeken közötti helyezésére. Ha többet szeretne tudni arról, hogy hogyan történik a webhely rangsorolása a Google rendszerében, akkor tekintse át a Google keresési találataiban való megjelenésre vonatkozó AdSense-cikket.
• A feltérképező robot URL alapján indexel.
  A robot külön látogatja meg a webhely.com és a www.webhely.com címet. Ugyanakkor nem tesz különbséget a webhely.com és a webhely.com/#horgony link között.
• A robot nem fér hozzá azokhoz az oldalakhoz és könyvtárakhoz, amelyek le vannak tiltva a robots.txt fájlban.
  A Google és az AdMob-médiapartnerek feltérképező robotjai tiszteletben tartják az Ön robots.txt fájlját. Ha a robot.txt fájl tiltja bizonyos oldalak vagy könyvtárak elérését, ezeket a robot nem térképezi fel.
  Fontos tudni, hogy ha hirdetéseket jelenít meg olyan oldalakon, amelyek robotok általi feltérképezése a User-agent: * sorral le van tiltva, a tartalomfeltérképező robot továbbra is fel fogja térképezni ezeket az oldalakat. Ha meg szeretné akadályozni, hogy a tartalomfeltérképező robot hozzáférjen az oldalaihoz, adja meg a User-agent: Mediapartners-Google sort a robots.txt fájlban. További információ.
• A robot csak az olyan URL-ekhez próbál meg hozzáférni, amelyeken el vannak helyezve a hirdetési címkéink.
  Csak a Google-hirdetéseket megjelenítő oldalak küldhetnek kérést a rendszerünknek, és csak az ilyen oldalakat térképezzük fel.
• A robot megpróbál hozzáférni az átirányítást végző oldalakhoz.
  Ha olyan „eredeti oldalai” vannak, amelyek más oldalakra irányítják át a felhasználókat, akkor a robot csak az eredeti oldalhoz való hozzáférés révén tudja meghatározni, hogy átirányítás történik. Emiatt a hozzáférési naplóban megjelenik a robot eredeti oldalakon tett látogatása.
• A webhelyek újbóli feltérképezése
  Jelenleg nem tudjuk szabályozni, milyen gyakran indexelik keresőrobotjaink az Ön webhelyének tartalmát. Robotjaink automatikusan térképezik fel az oldalakat. Ha módosítást végez egy oldalon, akkor 1–2 hétbe is beletelhet, amíg a módosítás megjelenik indexünkben.