A Googlebot feltérképezési sebességének módosítása

A feltérképezési sebesség azt jelöli, hogy a Googlebot másodpercenként hány kérést küld a webhelynek a feltérképezés során; például másodpercenként ötöt.

Azt nem módosíthatja, hogy a Google milyen gyakran térképezze fel webhelyét, de ha azt szeretné, hogy feltérképezze az új vagy frissített tartalmakat, kérheti az újbóli feltérképezést.

Megfelelő használat

Az egyes webhelyek optimális feltérképezési sebességének meghatározásához a Google összetett algoritmusokat használ. Célunk, hogy minden látogatás során a lehető legtöbb oldalt térképezzük fel webhelyén, ugyanakkor ne vegyük túlságosan igénybe szervere sávszélességét.

Ha a Google túl sok kérést küld másodpercenként a webhelynek, és ezzel lelassítja a szervert, akkor módosíthatja, hogy a Google milyen gyorsan térképezze fel a webhelyet.

A feltérképezési sebességet korlátozhatja a gyökérszintű webhelyeken – például a www.example.com és a http://subdomain.example.com szintjén. A beállított feltérképezési sebesség a Googlebot által elérhető maximális feltérképezési sebesség. Nem biztos, hogy a Googlebot eléri ezt.

Nem javasoljuk a feltérképezési sebesség korlátozását, hacsak nem tapasztal olyan szerverterhelési problémákat, amelyek egyértelműen a Googlebot okozta terhelésre vezethetők vissza.

A nem gyökérszintű webhelyek – például a www.example.com/mappa – feltérképezési sebessége nem módosítható.

A feltérképezési sebesség korlátozása

1. Nyissa meg a tulajdona feltérképezési sebességére vonatkozó beállítások oldalát.
   • Ha a feltérképezési sebesség mellett „a számítások szerint optimális” üzenet látható, akkor kizárólag speciális kérelem beküldésével kérheti a feltérképezési sebesség csökkentését. A sebességet Ön nem növelheti.
   • Ellenkező esetben válassza ki a kívánt lehetőséget, és korlátozza a feltérképezési sebességet igényei szerint. Az új feltérképezési sebesség 90 napig lesz érvényben.

Rendkívüli feltérképezési korlátozás

A következőket teheti, ha a feltérképezés miatt webhelye időnként nem férhető hozzá:

1. Állapítsa meg, hogy a Google melyik feltérképező robotja terheli túl a webhelyét. Nézze meg a webhely naplóit, vagy használja a Feltérképezési statisztikák jelentést.
2. Azonnali megoldás:
   • Ha egyszerű megoldást keres, tiltsa le a túlbuzgó robotot (googlebot, adsbot stb.) a robots.txt fájlban. Egy napra is szükség lehet azonban ahhoz, hogy a letiltás érvénybe lépjen. Azonban ne tiltsa le túl sokáig, mivel ez hosszú távon is befolyásolhatja a feltérképezést.
   • Ha dinamikusan tudja észlelni a megnövekedő terhelést és reagálni rá, küldjön 503/429 kódú HTTP-választ, amikor közel a megjelenítési kapacitás határa. Fontos, hogy legfeljebb csak két-három napon át küldjön 503 vagy 429 kódú választ, különben mindez azt jelezheti a Google-nak, hogy hosszabb távon is ritkább feltérképezést kérne.
3. Módosítsa a feltérképezés sebességét a feltérképezési sebességre vonatkozó beállítások oldalán, ha lehetősége van rá.
4. Két-három nappal később, miután a Google feltérképezési sebessége igazodott, eltávolíthatja a tiltást a robots.txt fájlból, vagy megszüntetheti az 503-as vagy 429-es hibakód visszaküldését.
5. Ha az AdsBot feltérképezései túlterhelik a webhelyét, akkor valószínűleg az a probléma, hogy túl sok célzást hozott létre dinamikus keresési hirdetéseknek a webhelyén az URL_Equals vagy oldalfeedek segítségével. Ha a szerver kapacitása nem elegendő ezekhez a feltérképezésekhez, akkor korlátozza a hirdetéscélzások számát, kisebb adagokban adjon hozzá URL-eket, vagy növelje megjelenítési kapacitását. Ne feledje, hogy az AdsBot kéthetente feltérképezi az oldalait, ezért javítsa ki a hibát, különben újra jelentkezni fog.
6. Fontos: A feltérképezési sebesség beállításaira vonatkozó oldalon módosított sebesség 90 nap elteltével visszaáll az automatikus meghatározásra.