Termin szybkość indeksowania oznacza liczbę żądań na sekundę, które Googlebot wysyła do Twojej witryny podczas jej indeksowania (na przykład 5 żądań na sekundę).
Nie możesz zmienić tego, jak często indeksujemy Twoją witrynę, ale jeśli chcesz, byśmy zindeksowali nową lub zaktualizowaną treść w witrynie, możesz poprosić o ponowne indeksowanie.
Prawidłowe użycie
Google korzysta z zaawansowanych algorytmów określających optymalną szybkość indeksowania witryny. Naszym celem jest zindeksowanie jak największej liczby stron w witrynie podczas każdych odwiedzin bez nadmiernego obciążania łączy serwera.
Jeśli wysyłamy do Twojej witryny zbyt dużo żądań na sekundę i spowalniamy pracę Twojego serwera, możesz ograniczyć szybkość indeksowania witryny przez Google.
Dotyczy to witryn poziomu głównego, na przykład www.example.com
i http://subdomain.example.com
. Ustawiona szybkość to maksymalna szybkość indeksowania przez Googlebota. Pamiętaj, że to działanie nie gwarantuje osiągnięcia przez Googlebota zadanej maksymalnej szybkości indeksowania.
Odradzamy ograniczanie szybkości indeksowania, chyba że masz pewność, że problemy z przeciążeniem serwera powoduje nasz Googlebot wysyłający zbyt wiele żądań.
Szybkości indeksowania nie możesz zmienić w przypadku witryn niższego poziomu, np. www.example.com/folder
.
Ograniczanie szybkości indeksowania
- Otwórz stronę ustawień szybkości indeksowania dla swojej usługi.
- Jeśli szybkość indeksowania jest opisana jako „optymalna według obliczeń”, jedynym sposobem jej zmniejszenia jest przesłanie specjalnej prośby. Szybkości indeksowania nie można zwiększyć.
- W innym przypadku wybierz odpowiednią opcję, a następnie ogranicz szybkość indeksowania. Nowa szybkość indeksowania będzie obowiązywać przez 90 dni.
Awaryjne ograniczenia indeksowania
Zobacz, jak możesz chronić swoją witrynę, jeśli jest indeksowana tak często, że występują problemy z jej dostępnością:
- Sprawdź, który robot Google zbyt często indeksuje Twoją witrynę. Przejrzyj dzienniki witryny lub skorzystaj z raportu Statystyki indeksowania.
- Pomoc doraźna:
- Jeśli szukasz prostego rozwiązania, użyj pliku robots.txt, aby zablokować indeksowanie przez element, który powoduje przeciążenia (googlebota, adbota itp.). Może to zająć nawet cały dzień. Nie blokuj ich jednak na zbyt długo, ponieważ może to mieć długoterminowy wpływ na indeksowanie.
- Jeśli możesz dynamicznie wykrywać zwiększone obciążenie i na nie reagować, zwracaj błędy HTTP 503/429, gdy zbliżasz się do limitu serwera. Pamiętaj, aby nie zwracać tych błędów przez okres dłuższy niż 2 lub 3 dni, bo może to sprawić, że witryna na stałe będzie rzadziej indeksowana przez Google.
- Zmień szybkość indeksowania na stronie ustawień szybkości indeksowania, jeśli ta opcja jest dostępna.
- Po upływie 2 lub 3 dni, gdy szybkość indeksowania przez Google zostanie dostosowana, możesz usunąć blokujące pliki robots.txt lub przestać zwracać kody błędów 503 lub 429.
- Jeśli Twoja witryna jest przeciążona żądaniami indeksowania przez robota AdsBot, przyczyną problemu jest prawdopodobnie utworzenie przez Ciebie w witrynie zbyt wielu celów dynamicznych reklam w wyszukiwarce przy użyciu metody
URL_Equals
lub plików z adresami stron docelowych. Jeśli Twój serwer nie poradzi sobie z obsługą tych indeksowań, ogranicz cele reklam, dodaj adresy URL w mniejszych partiach lub zwiększ możliwości serwera. AdsBot będzie indeksować Twoje strony co 2 tygodnie, dlatego musisz rozwiązać ten problem, bo inaczej będzie się powtarzał. - Pamiętaj, że jeśli ograniczysz szybkość indeksowania na stronie ustawień indeksowania, po upływie 90 dni szybkość indeksowania powróci do wartości dostosowanej automatycznie.