Laporan Statistik Perayapan (situs web)

Laporan Statistik Perayapan (khusus untuk situs web) memberikan informasi tentang aktivitas Googlebot di situs Anda selama 90 hari terakhir. Statistik ini memperhitungkan semua jenis konten yang kami unduh (misalnya CSS, JavaScript, Flash, dan file PDF, serta gambar).

Membuka laporan Statistik Perayapan

Statistik perayapan hanya tersedia untuk situs web terverifikasi.

Memahami data

Tidak ada jumlah perayapan yang "baik", namun seharusnya Anda melihat peta impas relatif yang meningkat dari waktu ke waktu dengan meningkatnya ukuran situs Anda. Jika Anda melihat penurunan atau lonjakan tiba-tiba, baca terus.

Mengapa laju perayapan menurun?

Secara umum, laju perayapan Google seharusnya relatif stabil selama rentang waktu satu atau dua minggu; jika melihat penurunan tiba-tiba, berikut beberapa kemungkinan alasannya:

  • Anda menambahkan aturan robots.txt baru (atau sangat luas). Pastikan bahwa Anda hanya memblokir sumber daya yang Anda butuhkan. Jika Google membutuhkan sumber daya khusus seperti CSS atau JavaScript untuk memahami konten, pastikan Anda tidak memblokirnya dari Googlebot.
  • HTML rusak atau konten tidak didukung di halaman Anda: Jika Googlebot tidak dapat mengurai konten halaman, mungkin karena halaman tersebut menggunakan jenis media yang tidak didukung atau halaman hanya berisi gambar. Googlebot tidak akan dapat meng-crawl halaman. Gunakan fitur Inspeksi URL untuk melihat cara Googlebot melihat halaman Anda.
  • Jika situs menanggapi permintaan dengan lambat, Googlebot akan memperlambat permintaan agar server Anda tidak kelebihan muatan. Periksa laporan Statistik Perayapan untuk melihat apakah situs menanggapi dengan lebih lambat.
  • Jika rasio kesalahan server meningkat, Googlebot akan memperlambat permintaan agar server Anda tidak kelebihan muatan. Periksa laporan Kesalahan Perayapan untuk peningkatan dalam kesalahan sambungan server.
  • Pastikan bahwa Anda belum menurunkan laju perayapan maksimum yang disukai.
  • Jika situs memiliki informasi yang lebih jarang berubah, atau kualitasnya tidak terlalu tinggi, mungkin kami tidak akan sering merayapinya.  Dengan jujur, lihatlah situs Anda, dapatkan masukan alami dari orang yang tidak dikaitkan dengan situs, dan pikirkan tentang cara atau hal pada situs yang dapat ditingkatkan secara keseluruhan.

Mengapa lajur perayapan melonjak?

Jika Anda menempatkan banyak informasi baru, atau memiliki beberapa informasi yang berguna di situs, Anda dapat dirayapi sedikit lebih banyak daripada semestinya. Berikut beberapa tips mengelola kecepatan crawling Googlebot untuk situs, jika Anda merasa server kelebihan muatan:

  • Konfirmasi bahwa Googlebot mengakses situs Anda dan bukan pemohon lain dengan melihat laporan Statistik Perayapan dan juga memeriksa agen pengguna di log.
  • Jika perlu memblokir perayapan Googlebot dengan segera, tampilkan kode hasil 503 HTTP ke permintaannya.
  • Sempurnakan file robots.txt untuk memblokir laman yang seharusnya tidak dipanggil.
  • Anda dapat menyetel  laju perayapan maksimum yang disukai di Search Console sebagai solusi jangka pendek. Sebaiknya jangan gunakan jangka panjang, karena hal tersebut tidak memungkinkan Anda memberi tahu kami secara khusus laman atau sumber daya yang ingin dirayapi versus yang tidak ingin dirayapi.
  • Pastikan Anda tidak memungkinkan perayapan ke laman dengan hasil "tak terbatas", seperti kalender tak terbatas atau hasil penelusuran tak terbatas. Memblokir dengan tag robots.txt atau nofollow.
  • Jika URL sudah tidak ada atau dipindahkan, pastikan untuk menampilkan kode tanggapan yang tepat: gunakan 404 atau 410 untuk URL yang sudah tidak ada atau yang tidak valid; gunakan pengalihan 301 untuk URL yang telah diganti dengan yang lain secara permanen (302 jika tidak permanen); gunakan 503 jika dinonaktifkan dengan terencana untuk sementara; pastikan server Anda mengembalikan kesalahan 500 jika melihat masalah yang tidak dapat diatasi.

 

Apakah ini membantu?
Bagaimana cara meningkatkannya?