Memperbaiki masalah crawler AdSense

Memastikan situs Anda sepenuhnya dapat di-crawl dapat membantu Anda memperoleh lebih banyak pendapatan dari konten. Jika crawler konten tidak dapat mengakses konten Anda, lihat daftar masalah crawler berikut untuk membantu Anda memperbaiki masalahnya.

Masalah akses

Kemungkinan alasan	Yang harus diperiksa	Cara memperbaiki
Situs Anda dilindungi login. Mungkin crawler iklan dialihkan ke halaman login, yang berarti crawler tidak dapat meng-crawl konten Anda.	Apakah pengunjung memerlukan detail login untuk mengakses konten Anda?	Siapkan info login crawler untuk menggunakan konten web yang dilindungi login untuk pemetaan konten dalam aplikasi.
Konten Anda menggunakan jaringan atau rentang IP yang dibatasi.	Apakah Anda telah menerapkan batasan yang membatasi geografi atau rentang IP yang dapat mengakses konten Anda?	Sebaiknya hapus batasan tersebut atau buat agar konten Anda dapat diakses oleh publik, sehingga crawler iklan dapat meng-crawl URL Anda.
Anda telah memblokir crawler iklan di file robots.txt.	Apakah crawler iklan tidak diizinkan di file robots.txt?	Berikan akses ke crawler iklan di file robots.txt Anda.

Masalah situs

Kemungkinan alasan	Yang harus diperiksa	Cara memperbaiki
Situs Anda tidak dapat ditemukan. Jika URL yang dikirim ke Google mengarah ke halaman yang tidak ada (atau tidak lagi tersedia) di suatu situs, atau menghasilkan error 404 (Tidak Ditemukan), crawler iklan tidak akan berhasil meng-crawl konten Anda.	Apakah situs Anda aktif dan berjalan? Dapatkah pengunjung mengakses situs Anda di web?	Pastikan situs Anda telah dipublikasikan dan tayang di web.
Situs Anda memiliki konten yang baru dipublikasikan. Saat memublikasikan halaman baru, Anda mungkin mengajukan permintaan iklan sebelum crawler Google dapat meng-crawl konten Anda. Contoh situs yang memposting banyak konten baru mencakup situs dengan konten buatan pengguna, artikel berita, inventaris produk yang besar, atau situs cuaca.	Apakah Anda baru saja memublikasikan konten baru?	Tunggu beberapa waktu agar crawler iklan dapat meng-crawl konten baru Anda. Biasanya setelah permintaan iklan diajukan pada URL baru, konten akan di-crawl dalam beberapa menit. Namun, selama beberapa menit awal ini, karena konten Anda belum di-crawl, Anda mungkin menerima volume iklan yang rendah.
Situs Anda menggunakan beberapa pengalihan. Jika situs Anda menggunakan pengalihan, ada risiko bahwa crawler iklan mungkin mengalami masalah saat mengikuti pengalihan tersebut. Misalnya, jika Anda memiliki beberapa pengalihan dan pengalihan perantara gagal, atau jika parameter penting seperti cookie dihapus selama pengalihan, hal ini dapat menurunkan kualitas crawling.	Apakah situs Anda menggunakan banyak pengalihan? Apakah Anda telah menyiapkan pengalihan pada halaman yang menampilkan iklan?	Sebaiknya minimalkan penggunaan pengalihan pada halaman dengan kode iklan. Pastikan semua pengalihan Anda diterapkan dengan benar.
Anda menggunakan URL halaman yang dipersonalisasi. Beberapa situs menyertakan parameter tambahan di URL-nya yang menunjukkan pengguna yang login (mis., ID Sesi), atau informasi lain yang mungkin unik untuk setiap kunjungan. Jika hal ini terjadi, crawler iklan mungkin memperlakukan URL sebagai halaman baru, meskipun kontennya sama. Hal ini dapat mengakibatkan jeda beberapa menit antara permintaan iklan pertama di halaman dan saat halaman di-crawl, serta peningkatan beban crawler pada server Anda.	Apakah situs Anda menggunakan URL dengan parameter tambahan atau jalur URL yang dibuat secara dinamis?	Umumnya, jika konten di suatu halaman tidak berubah, sebaiknya hapus parameter tersebut dari URL dan cari cara lain agar informasi yang seharusnya disediakan parameter tersebut dapat dipertahankan. Struktur URL yang lebih sederhana dapat membantu membuat situs Anda lebih mudah di-crawl.
Anda menggunakan data POST. Jika situs Anda mengirim data POST bersama dengan URL (misalnya, meneruskan data formulir melalui permintaan POST), mungkin situs Anda menolak permintaan yang tidak disertai data POST. Perhatikan bahwa karena crawler iklan tidak akan menyediakan data POST apa pun, jenis penyiapan ini dapat mencegah crawler mengakses halaman Anda.	Apakah situs Anda mengirimkan data POST bersama dengan URL?	Jika konten halaman Anda ditentukan oleh data yang dimasukkan pengguna ke formulir, sebaiknya gunakan permintaan GET.

Masalah hosting

Kemungkinan alasan	Yang harus diperiksa	Cara memperbaiki
Ada masalah dengan server nama situs Anda.	Apakah server nama Anda disiapkan dengan benar? Apakah Anda memiliki batasan terkait dari mana permintaan dapat berasal?	Pastikan server nama untuk domain atau subdomain Anda mengarahkan crawler ke konten Anda dengan benar.
Ada masalah dengan server situs Anda. Terkadang saat crawler iklan mencoba mengakses konten situs, server situs tidak dapat merespons secara tepat waktu. Hal ini dapat terjadi karena server sedang tidak aktif, lambat, atau kelebihan beban akibat permintaan.	Apakah server situs Anda aktif dan berjalan?	Sebaiknya pastikan situs Anda dihosting di server yang andal atau oleh penyedia layanan yang andal.