Laporan Status Cakupan Indeks

Gunakan laporan ini untuk mengetahui halaman mana yang telah diindeks dan cara memperbaiki halaman yang tidak dapat diindeks.

 

BUKA LAPORAN CAKUPAN INDEKS

 

Cara menggunakan laporan ini

Laporan ini akan lebih mudah dipahami jika Anda telah membaca cara kerja Google Penelusuran terlebih dahulu.

Laporan ini menampilkan status pengindeksan semua URL yang telah Google kunjungi, atau coba kunjungi, di properti Anda. Halaman ringkasan menampilkan hasil untuk semua URL di properti Anda, yang dikelompokkan berdasarkan status (error, peringatan, atau valid) dan alasan spesifik untuk status tersebut (seperti URL yang dikirim tidak ditemukan (404)). Klik pada baris tabel untuk melihat semua URL dengan status/alasan yang sama dan melihat detail lebih lanjut tentang masalah ini.

Tampilan ringkasan

Laporan tingkat teratas menampilkan status indeks dari semua halaman di situs Anda yang sudah dicoba di-crawl oleh Google, yang dikelompokkan berdasarkan status dan alasan.

Yang perlu diperhatikan

  • Biasanya, Anda akan melihat peningkatan secara bertahap jumlah halaman valid yang diindeks, seiring dengan berkembangnya situs.
  • Jika ada lonjakan dalam error pengindeksan, ini mungkin disebabkan oleh perubahan pada template Anda, dan hal ini memunculkan error baru. Atau, Anda mungkin telah mengirimkan peta situs berisi URL yang tidak dapat di-crawl (misalnya sudah diblokir oleh robots.txt atau noindex, maupun persyaratan login). Klik masalahnya, lalu periksa halaman untuk melihat apa error-nya.
  • Jika melihat penurunan jumlah total halaman yang diindeks tanpa error terkait, Anda mungkin memblokir akses ke halaman yang ada (via robots.txt, 'noindex', atau mewajibkan autentikasi) yang belum Anda kirim untuk pengindeksan. Lihatlah URL yang Dikecualikan untuk mengetahui lonjakan yang terkait dengan penurunan total halaman Anda yang diindeks.
  • Jika Anda memiliki lebih banyak halaman Dikecualikan daripada halaman Valid, lihat jenis pengecualiannya. Alasan pengecualian biasanya meliputi:
    • Anda memiliki aturan robots.txt yang memblokir Google agar tidak meng-crawl sebagian besar situs Anda.
    • Situs Anda memiliki banyak halaman duplikat, biasanya karena menggunakan parameter untuk memfilter atau mengurutkan koleksi yang sama (misalnya: type=dress atau color=green atau sort=price). Jika halaman hanya menampilkan konten sama yang diurutkan atau difilter dengan cara yang berbeda, halaman tersebut mungkin sebaiknya dikecualikan.

Lihat tips pemecahan masalah lainnya di bawah ini.

Yang tidak perlu diperhatikan

  • Anda tidak perlu mengharapkan agar semua URL di situs Anda diindeks. Tujuan Anda adalah mendapatkan satu versi dari setiap halaman yang diindeks, yaitu versi kanonis. Setiap halaman duplikat atau alternatif akan diberi label Dikecualikan dalam laporan ini. Halaman duplikat atau alternatif pada intinya memiliki konten yang sama dengan halaman kanonis. Menandai halaman sebagai duplikat atau alternatif adalah hal yang baik, yang mengindikasikan bahwa kami telah menemukan halaman kanonisnya dan telah mengindeksnya. Anda dapat menemukan halaman kanonis untuk URL apa pun dengan menjalankan Fitur Inspeksi URL.
  • Jika menambahkan konten baru, Anda akan melihat keterlambatan antara saat Anda menambahkan halaman baru dan ketika Google mengindeksnya. Anda dapat mengurangi keterlambatan pengindeksan dengan meminta pengindeksan.

Status

Setiap halaman dapat memiliki salah satu dari kelas status umum berikut:

  • Error: Halaman belum diindeks. Lihat deskripsi jenis error spesifik untuk mempelajari lebih lanjut tentang error yang terjadi dan cara memperbaikinya. Anda harus memprioritaskan masalah ini terlebih dahulu.
  • Peringatan: Halaman ini diindeks (atau baru-baru ini diindeks), tetapi memiliki masalah yang harus Anda ketahui.
  • Dikecualikan: Halaman ini tidak termasuk dalam indeks, tetapi kemungkinan besar ini bukan merupakan error. Halaman mungkin berada di tengah proses pengindeksan, atau sengaja Anda kecualikan (misalnya dengan perintah noindex) dan karena itu berperilaku seperti yang diharapkan.
  • Valid: Halaman telah diindeks.

Alasan

Setiap status (valid, peringatan, error, dikecualikan) memiliki alasan khusus masing-masing. Data dalam tabel dikelompokkan berdasarkan alasan; setiap baris dapat mendeskripsikan satu URL atau lebih. Lihat Deskripsi jenis status di bawah untuk mengetahui deskripsi setiap jenis status dan cara menanganinya.

Validasi

Status validasi untuk masalah ini. Anda harus memprioritaskan masalah yang gagal atau tidak dimulai.

Tentang validasi

Setelah memperbaiki semua instance masalah khusus di situs, Anda dapat meminta Google memvalidasi perubahan. Jika semua instance yang diketahui sudah tidak ada, masalah akan ditandai sebagai diperbaiki pada tabel status dan dipindahkan ke bagian bawah tabel. Search Console memantau status validasi masalah secara keseluruhan, serta status setiap instance masalah. Jika semua instance masalah sudah tidak ada, masalah akan dianggap telah diperbaiki. (Untuk rekaman status aktual, lihat Status validasi masalah dan Status validasi instance.)

Selengkapnya tentang masa aktif masalah...

Masa aktif masalah dimulai sejak pertama kali instance dari masalah tersebut terdeteksi di situs, hingga 90 hari setelah instance terakhir ditandai sebagai sudah tidak ada di situs. Jika 90 hari berlalu tanpa ada perulangan, masalah akan dihapus dari histori laporan.

Tanggal pertama kali terdeteksinya masalah adalah waktu pertama kali masalah terdeteksi selama masa aktif masalah, dan tidak mengalami perubahan. Jadi:

  • Jika semua instance masalah telah diperbaiki, namun ada instance masalah yang baru terjadi 15 hari kemudian, masalah akan ditandai sebagai terbuka, dan tanggal "pertama kali terdeteksi" tetap menjadi tanggal aslinya.
  • Jika masalah yang sama terjadi 91 hari setelah instance terakhir diperbaiki, masalah sebelumnya akan ditutup, dan masalah ini dicatat sebagai masalah baru, dengan tanggal terdeteksi pertama kali ditetapkan pada "hari ini".

Alur validasi dasar

Berikut ini ringkasan proses validasi setelah Anda mengklik Validasi Perbaikan untuk masalah. Proses ini dapat memerlukan waktu beberapa hari, dan Anda akan menerima pemberitahuan progres melalui email.

  1. Saat Anda mengklik Validasi Perbaikan, Search Console langsung memeriksa beberapa halaman.
    • Jika instance saat ini ada di salah satu halaman tersebut, validasi akan berakhir, dan status validasi tetap tidak berubah.
    • Jika halaman contoh tidak memiliki error saat ini, validasi akan dilanjutkan dengan status Dimulai. Jika validasi menemukan masalah lain yang tidak terkait, masalah tersebut akan dianggap sebagai jenis masalah lain dan validasi dilanjutkan.
  2. Search Console bekerja melalui daftar URL yang diketahui, yang terpengaruh oleh masalah ini. Antrean untuk crawling ulang hanya berisi URL dengan instance masalah yang diketahui, bukan keseluruhan situs. Search Console menyimpan rekaman semua URL yang diperiksa pada histori validasi, yang dapat dibuka di halaman detail masalah.
  3. Saat URL diperiksa:
    1. Jika masalah tidak ditemukan, status validasi instance berubah menjadi Lulus. Jika ini adalah instance pertama yang diperiksa setelah validasi dimulai, status validasi masalah berubah menjadi Terlihat bagus.
    2. Jika URL tidak lagi dapat dijangkau, status validasi instance berubah menjadi Lainnya (bukan merupakan status error).
    3. Jika instance masih ada, status masalah berubah menjadi Gagal dan validasi berakhir. Jika ini adalah halaman baru yang ditemukan oleh crawling normal, halaman ini akan dianggap sebagai instance lain dari masalah yang ada.
  4. Jika semua URL peringatan dan error telah diperiksa dan jumlah masalahnya bernilai 0, status masalah akan berubah menjadi Lulus. Penting: Meskipun jumlah halaman yang terpengaruh berkurang hingga 0 dan status masalah berubah menjadi Lulus, label tingkat keparahan asli akan tetap ditampilkan (Error atau Peringatan).

Meskipun Anda tidak pernah mengklik "mulai validasi" Google dapat mendeteksi instance masalah yang telah diperbaiki. Jika Google mendeteksi bahwa semua instance masalah telah diperbaiki selama crawl regulernya, status masalah akan berubah menjadi "T/A" pada laporan.

Kapan masalah dianggap sebagai "diperbaiki" untuk URL atau item?

Masalah ditandai sebagai diperbaiki untuk URL atau item saat salah satu ketentuan berikut terpenuhi:

  • Saat URL di-crawl dan masalahnya tidak ditemukan lagi di halaman. Untuk error tag AMP, hal ini dapat berarti bahwa Anda telah memperbaiki tag atau tag tersebut telah dihapus (jika tag tidak diwajibkan). Selama upaya validasi, status masalah akan dianggap sebagai "lulus".
  • Jika halaman tidak tersedia untuk Google dengan alasan apa pun (halaman dihapus, ditandai noindex, perlu autentikasi, dan sebagainya), masalah tersebut akan dianggap sebagai diperbaiki untuk URL tersebut. Selama upaya validasi dilakukan, masalah akan dianggap dalam status validasi "lainnya".

Validasi ulang

Saat Anda mengklik Validasi ulang untuk validasi yang gagal, validasi akan dimulai ulang untuk semua instance yang gagal, serta instance baru apa pun dari masalah ini yang ditemukan melalui crawling normal.

Anda harus menunggu siklus validasi selesai sebelum meminta siklus validasi lagi, meskipun Anda telah memperbaiki beberapa masalah selama siklus saat ini.

Instance yang telah lulus validasi (ditandai sebagai Lulus) atau tidak dapat dijangkau lagi (ditandai sebagai Lainnya) tidak akan diperiksa lagi dan dihapus dari histori saat Anda mengklik Validasi ulang.

Histori validasi

Anda dapat melihat progres permintaan validasi dengan mengklik link detail validasi di halaman detail masalah.

Entri di halaman histori validasi dikelompokkan berdasarkan URL untuk laporan AMP dan laporan Status Indeks. Dalam laporan Kegunaan Seluler dan Hasil Kaya, item dikelompokkan berdasarkan kombinasi URL + item data terstruktur (seperti yang ditentukan berdasarkan nilai Nama item). Status validasi berlaku untuk masalah tertentu yang Anda periksa. Anda dapat memiliki satu masalah berlabel "Lulus" di halaman, tetapi masalah lainnya berlabel "Gagal", "Tertunda", atau "Lainnya".

Status validasi masalah

Status validasi berikut berlaku untuk masalah tertentu:

  • Belum dimulai: Ada 1 atau lebih dari 1 halaman dengan instance masalah ini yang belum pernah Anda coba validasi. Langkah berikutnya:
    1. Klik masalah untuk mempelajari detail error-nya. Periksa setiap halaman untuk melihat contoh error pada halaman aktif menggunakan Pengujian AMP. (Jika Pengujian AMP tidak menampilkan error pada halaman, ini terjadi karena Anda telah memperbaiki error pada halaman aktif setelah Google menemukan error dan membuat laporan masalah ini.)
    2. Klik "Pelajari lebih lanjut" pada halaman detail untuk melihat detail aturan yang telah dilanggar.
    3. Klik contoh baris URL pada tabel untuk mendapatkan detail tentang error tersebut.
    4. Perbaiki halaman, lalu klik Validasi perbaikan agar Google meng-crawl ulang halaman. Google akan memberi tahu Anda tentang progres validasi. Validasi dapat memakan waktu beberapa hari hingga kira-kira 2 minggu, jadi harap bersabar. 
  • Dimulai: Anda telah memulai upaya validasi dan belum ada sisa instance masalah yang ditemukan. Langkah berikutnya: Google akan mengirimkan pemberitahuan saat validasi diproses, yang memberi tahu Anda tindakan yang harus dilakukan, jika perlu.
  • Terlihat bagus: Anda telah memulai upaya validasi, dan semua instance masalah yang diperiksa telah diperbaiki. Langkah berikutnya: Tidak ada tindakan yang harus dilakukan, namun Google akan mengirimkan pemberitahuan saat validasi diproses, yang memberi tahu Anda tentang tindakan yang harus dilakukan.
  • Lulus: Semua instance masalah yang diketahui sudah tidak ada (atau URL yang terpengaruh tidak tersedia lagi). Status ini muncul karena Anda telah mengklik "Validasi perbaikan" (jika instance tidak muncul tanpa adanya permintaan validasi, statusnya akan berubah menjadi T/A). Langkah berikutnya: Tidak ada lagi tindakan yang harus dilakukan.
  • T/A: Google mendapati bahwa masalah telah diperbaiki pada semua URL, meskipun Anda belum pernah memulai upaya validasi. Langkah berikutnya: Tidak ada lagi tindakan yang harus dilakukan.
  • Gagal: Ambang batas tertentu dari halaman masih berisi masalah ini, setelah Anda mengklik "Validasi". Langkah berikutnya: Perbaiki masalah dan validasi ulang.

Status validasi instance

Setelah validasi diminta, setiap instance masalah yang diketahui akan diberi salah satu status validasi berikut untuk masalah tertentu (status Lulus dan Lainnya tidak digunakan dalam laporan Status Indeks):

  • Validasi tertunda: Menunggu proses validasi. Terakhir kali Google memeriksanya, instance masalah ini sudah ada.
  • Lulus: Google memeriksa instance masalah, namun instance tersebut sudah tidak ada. Status ini hanya bisa didapatkan jika Anda secara eksplisit mengklik Validasi untuk instance masalah ini.
  • Gagal: Google memeriksa instance masalah, dan instance tersebut masih ada. Status ini hanya bisa didapatkan jika Anda secara eksplisit mengklik Validasi untuk instance masalah ini.
  • Lainnya: Google tidak dapat menjangkau URL yang menghosting instance, atau (untuk data terstruktur) tidak dapat menemukan item di halaman tersebut lagi. Dianggap setara dengan Lulus.

Perlu diketahui bahwa URL yang sama dapat memiliki status yang berbeda untuk masalah yang berbeda; Misalnya, jika sebuah halaman memiliki masalah X dan masalah Y, masalah X dapat memiliki status validasi Lulus dan masalah Y pada halaman yang sama dapat memiliki status validasi Tertunda.

Filter drop-down penemuan URL

Gunakan filter drop-down di atas diagram untuk memfilter hasil indeks menurut mekanisme Google dalam menemukan URL. Nilai-nilai berikut tersedia:

  • Semua halaman yang diketahui [Default] - Menampilkan semua URL yang ditemukan oleh Google melalui cara apa pun.
  • Semua halaman yang dikirimkan - Hanya menampilkan halaman yang dikirimkan dalam peta situs, baik menggunakan Search Console maupun ping peta situs.
  • URL peta situs tertentu - Hanya menampilkan URL yang tercantum dalam peta situs tertentu yang dikirimkan menggunakan Search Console. Jika ini adalah indeks peta situs, semua URL dalam peta situs yang disertakan akan dilaporkan.

URL dianggap telah dikirimkan oleh peta situs meskipun URL tersebut juga ditemukan dengan beberapa mekanisme lain (misalnya melalui crawling organik dari halaman lain).

Tampilan detail

Mengklik baris di halaman ringkasan akan menyajikan tampilan detail dari kombinasi status dan alasan. Anda dapat melihat detail masalah yang dipilih dengan mengklik Pelajari lebih lanjut di halaman detail.

Grafik menunjukkan halaman yang terpengaruh dari waktu ke waktu.

Tabel menunjukkan daftar contoh halaman yang dipengaruhi oleh masalah ini:

  • Buka URL di tabel dengan mengklik link anchor di baris tabel.
  • Periksa URL di tabel dengan mengklik ikon periksa Telusuri di baris tabel.
  • Setelah memperbaiki semua error atau peringatan yang muncul, Anda dapat meminta Google untuk memvalidasi perbaikan yang telah dilakukan.

URL ditandai dengan masalah yang telah Anda perbaiki? Mungkin Anda memperbaiki masalah SETELAH terakhir kali URL tersebut di-crawl oleh Google. Oleh karena itu, jika masalah yang telah Anda perbaiki sebelumnya pada sebuah URL masih terlihat, pastikan untuk memeriksa tanggal crawling URL tersebut. Periksa dan konfirmasikan perbaikan yang Anda lakukan, lalu minta pengindeksan ulang.

 

Membagikan laporan

Anda dapat membagikan detail masalah dengan mengklik tombol Bagikan di halaman. Link ini hanya memberikan akses ke halaman saat ini dan halaman histori validasi untuk masalah ini kepada siapa pun yang memiliki link. Link tidak memberikan akses ke halaman lain resource Anda atau memungkinkan pengguna bersama melakukan tindakan apa pun di properti atau akun Anda. Anda dapat mencabut link kapan saja dengan menonaktifkan fitur berbagi untuk halaman ini.

Pemecahan masalah

Lonjakan error

Jika Anda melihat peningkatan yang signifikan pada jumlah error:

  1. Coba temukan keterkaitan jumlah total error pengindeksan atau jumlah total halaman yang diindeks, dengan garis lonjakan untuk error tertentu sebagai petunjuk atas masalah mana yang mungkin memengaruhi total error atau jumlah total halaman yang diindeks.
  2. Memperbaiki masalah:
    1. Tabel URL yang dikelompokkan berdasarkan tingkat keparahan dan peringatan diurutkan berdasarkan gabungan tingkat keparahan, jumlah halaman yang terpengaruh, dan apakah halaman tersebut sedang divalidasi atau tidak. Sebaiknya perbaiki masalah sesuai urutan default yang ditampilkan.
    2. Cari lonjakan frekuensi di baris masalah yang terjadi pada saat yang sama dengan lonjakan error di diagram teratas.
    3. Klik baris error untuk membuka halaman detail yang berisi informasi lebih lengkap. Baca deskripsi tentang jenis error tertentu untuk mempelajari cara penanganan terbaik.
    4. Perbaiki semua error yang muncul, lalu minta validasi dengan mengklik Validasi Perbaikan di halaman detail karena alasan tersebut. Baca selengkapnya tentang validasi.
    5. Anda akan mendapatkan pemberitahuan saat validasi diproses, namun Anda dapat memeriksa kembali setelah beberapa hari untuk mengetahui apakah jumlah error telah berkurang.
  3. Secara berkala, hapus filter untuk URL yang dikecualikan, urutkan URL berdasarkan jumlah halaman yang terpengaruh, lalu pindai URL untuk masalah yang tidak diinginkan.

Menemukan status indeks dari URL tertentu

Untuk mempelajari status indeks URL tertentu, gunakan Fitur Inspeksi URL. Anda tidak dapat mencari atau memfilter menurut URL di laporan Cakupan Indeks.
Memperbaiki error server
Error server berarti Googlebot tidak dapat mengakses URL Anda, waktu permintaan habis, atau situs Anda sedang sibuk. Akibatnya, Googlebot terpaksa membatalkan permintaan.

Menguji konektivitas server

Anda dapat menggunakan Fitur Inspeksi URL untuk melihat apakah Anda dapat mereproduksi error server yang dilaporkan oleh laporan Status Cakupan Indeks.

Memperbaiki kesalahan konektivitas server

  • Kurangi pemuatan halaman yang berlebihan untuk permintaan halaman dinamis.
    Situs yang menayangkan konten serupa untuk beberapa URL dianggap menayangkan konten secara dinamis (misalnya, www.example.com/shoes.php?color=red&size=7 menayangkan konten yang sama dengan www.example.com/shoes.php?size=7&color=red).  Halaman dinamis dapat memakan waktu yang terlalu lama untuk merespons, yang mengakibatkan masalah waktu tunggu habis. Atau, server dapat menampilkan status kelebihan beban, yang meminta Googlebot meng-crawl situs dengan lebih lambat. Secara umum, disarankan agar daftar parameter tetap singkat dan daftar digunakan dengan efektif. Jika yakin tentang cara kerja parameter di situs, Anda dapat memberi tahu Google cara menangani parameter ini.
  • Pastikan server hosting situs Anda aktif, tidak kelebihan beban, atau tidak salah konfigurasi.
    Jika terdapat masalah sambungan, waktu tunggu, atau respons, periksa penghosting web Anda dan pertimbangkanlah untuk meningkatkan kemampuan situs Anda dalam menangani lalu lintas.
  • Periksa apakah Anda tidak sengaja memblokir Google.
    Anda mungkin telah memblokir Google karena ada masalah di tingkat sistem, seperti masalah konfigurasi DNS, firewall atau sistem perlindungan DoS yang salah konfigurasi, atau konfigurasi sistem pengelolaan konten. Sistem perlindungan merupakan bagian penting hosting yang baik dan sering kali dikonfigurasi untuk memblokir permintaan server yang sangat tinggi yang tidak biasa secara otomatis. Akan tetapi, karena Googlebot sering melakukan permintaan lebih banyak daripada pengguna manusia, tindakan ini dapat memicu sistem perlindungan tersebut, yang menyebabkannya pemblokiran Googlebot dan membuatnya tidak dapat meng-crawl situs Anda. Untuk memperbaiki masalah tersebut, identifikasi bagian mana dari infrastruktur situs web Anda yang memblokir Googlebot dan hentikan pemblokiran tersebut. Mungkin Anda tidak dapat mengontrol firewall, sehingga Anda harus membicarakannya dengan penyedia hosting.
  • Kontrol pengindeksan dan crawling situs mesin telusur dengan bijak.
    Beberapa webmaster mencegah Googlebot meng-crawl situsnya dengan sengaja, mungkin menggunakan firewall seperti yang disebutkan di atas. Dalam kasus ini, biasanya tujuannya bukan untuk memblokir Googlebot sepenuhnya, namun untuk mengontrol cara situs di-crawl dan diindeks. Jika ini terjadi pada Anda, periksa berikut ini:
Memperbaiki error 404

Anda disarankan untuk memperbaiki halaman error 404 saja, bukan halaman dikecualikan 404. URL error 404 adalah URL yang Anda secara eksplisit meminta Google untuk mengindeksnya, tetapi tidak ditemukan. URL dikecualikan 404 adalah URL yang ditemukan Google melalui sejumlah mekanisme lainnya.

Berikut ini cara menangani error 404:

  1. Tentukan apakah error tersebut memang perlu diperbaiki atau tidak. Banyak (mungkin sebagian besar) error 404 tidak perlu diperbaiki karena 404 tidak membahayakan pengindeksan atau peringkat situs Anda.
    • Jika itu adalah URL yang dikirimkan (error), sebaiknya diperbaiki.
    • Jika halaman yang dihapus tidak memiliki pengganti atau halaman yang setara, menampilkan error 404 adalah hal yang tepat. Laporan akan berhenti menampilkan error 404 setelah sekitar satu bulan.
    • Anda tidak perlu khawatir jika error 404 merupakan URL buruk yang dihasilkan oleh skrip, atau URL tidak pernah ada di situs Anda. Mungkin error 404 yang ada di laporan cukup mengganggu Anda, tetapi Anda tidak perlu memperbaikinya, kecuali URL adalah link yang salah eja (lihat di bawah). Error 404 harus dihapus dari laporan setelah sekitar satu bulan.
  2. Jika URL dikirimkan untuk pengindeksan (statusnya adalah Error),
    1. Periksa URL untuk melihat asal pengirimannya dengan mengklik ikon kirim di sebelah URL Telusuri dan lihat informasi Discovery. Perbarui peta situs seperlunya.
    2. Jika konten dipindahkan, tambahkan pengalihan.
    3. Jika Anda telah menghapus konten secara permanen dan tidak ingin menggantinya dengan konten terkait yang lebih baru, biarkan URL lama menampilkan error 404 atau 410. Saat ini Google memperlakukan 410 (Hilang) sama dengan 404 (Tidak ditemukan). Menampilkan kode selain 404 atau 410 untuk halaman yang tidak ada (atau mengalihkan pengguna ke halaman lain, seperti beranda, dan tidak menampilkan 404) dapat menimbulkan masalah. Halaman semacam ini dikenal sebagai 404 ringan, yang dapat membingungkan pengguna dan mesin telusur.
    4. Jika URL tidak diketahui: Terkadang Anda mungkin melihat error 404 untuk URL yang tidak pernah ada di situs Anda. Error ini dapat terjadi ketika seseorang menjelajah ke URL yang tidak ada di situs Anda - mungkin seseorang salah menuliskan URL di browser, atau seseorang salah menuliskan URL link. Jika itu adalah error yang sangat umum, Anda dapat membuat pengalihan untuk URL.
      URL yang tidak diharapkan ini mungkin dibuat oleh Googlebot yang mencoba mengikuti link yang ditemukan di JavaScript, file Flash, maupun konten lain yang disematkan, atau yang mungkin hanya ada di peta situs. Misalnya, situs Anda dapat menggunakan kode seperti ini untuk melacak file hasil download di Google Analytics:
      <a href="helloworld.pdf"
        onClick="_gaq.push(['_trackPageview','/download-helloworld']);">
        Hello World PDF</a>

      Saat melihat kode ini, Googlebot mungkin mencoba meng-crawl URL http://www.example.com/download-helloworld, meskipun URL tersebut bukan halaman sebenarnya. Dalam hal ini, link mungkin muncul sebagai error 404 (Tidak Ditemukan) di laporan Error Crawl. Google terus berusaha mencegah agar error crawl semacam ini tidak terjadi lagi. Error ini tidak memengaruhi crawling atau penentuan peringkat situs Anda.

  3. Jangan membuat konten palsu, mengalihkan ke beranda, atau menggunakan robots.txt untuk memblokir 404—semua hal tersebut menyulitkan kami untuk mengenali struktur situs dan memprosesnya dengan benar. Kami menyebutnya error 404 ringan.(Setelah berhasil meng-crawl URL, Google dapat mencoba meng-crawl URL tersebut selamanya. Menggunakan pengalihan 300 tingkat akan menunda upaya crawling ulang, mungkin untuk waktu yang sangat lama.) Mengirimkan permintaan penghapusan URL menggunakan fitur penghapusan URL tidak akan menghapus error dari laporan ini.

FAQ

Mengapa halaman (atau situs) saya tidak (belum) diindeks?

Jika Anda memiliki situs baru, Google membutuhkan waktu untuk menemukan dan meng-crawl-nya.

  1. Agar Google dapat mempelajari halaman baru, Anda harus mengirimkan peta situs atau permintaan crawl halaman, atau Google harus menemukan link ke halaman Anda di mana saja.
  2. Setelah URL halaman diketahui, perlu beberapa saat (hingga beberapa minggu) sebelum Google meng-crawl sebagian atau semua situs Anda.

Pengindeksan tidak pernah instan, bahkan saat Anda mengirim permintaan crawling secara langsung.

Mengapa halaman saya diindeks? Saya tidak menginginkannya.

Google dapat mengindeks URL apa pun yang ditemukannya, kecuali jika Anda menyertakan perintah noindex pada halaman tersebut (atau telah diblokir sementara), dan Google dapat menemukan halaman dengan berbagai cara, termasuk seseorang yang menghubungkan ke halaman Anda dari situs lain.

  1. Jika ingin halaman Anda diblokir dari hasil Google Penelusuran, Anda dapat meminta semacam login untuk halaman tersebut, atau Anda dapat menggunakan perintah noindex pada halaman.
  2. Jika ingin halaman Anda dihapus dari hasil Google Penelusuran setelah ditemukan, Anda harus mengikuti langkah-langkah ini.

Mengapa situs saya belum diindeks ulang belakangan ini?

Google mengindeks ulang halaman berdasarkan beberapa kriteria, seperti seberapa sering halaman tersebut berubah menurut perhitungan Google. Jika situs Anda tidak sering berubah, hal ini mungkin disebabkan oleh rasio pembaruan yang lebih lambat. Pada dasarnya, bukan menjadi masalah jika halaman Anda belum berubah. Jika menurut Anda situs memerlukan refresh, minta Google untuk meng-crawl ulang.

Bisakah Anda meng-crawl ulang halaman/situs saya?

Minta Google untuk meng-crawl ulang.

Mengapa begitu banyak halaman saya yang dikecualikan?

Lihatlah alasan pengecualian yang diperinci dalam laporan Cakupan Indeks. Sebagian besar pengecualian disebabkan oleh salah satu alasan berikut:

  • Anda memiliki aturan robots.txt yang memblokir Google agar tidak meng-crawl sebagian besar situs Anda. Gunakan Fitur Inspeksi URL untuk memastikan masalahnya.
  • Situs Anda memiliki banyak halaman duplikat, biasanya karena menggunakan parameter untuk memfilter atau mengurutkan koleksi yang sama (misalnya: type=dress atau color=green atau sort=price). Halaman-halaman tersebut akan diberi label sebagai "duplikat" atau "alternatif" dalam laporan Cakupan Indeks.
  • URL halaman tersebut dialihkan ke URL lain. URL pengalihan tidak diindeks, sedangkan target pengalihan diindeks.

Google tidak dapat mengakses peta situs saya

Pastikan peta situs Anda tidak diblokir oleh robots.txt, valid, dan Anda menggunakan URL yang tepat di entri robots.txt Anda atau pengiriman laporan Peta Situs. Uji URL peta situs Anda menggunakan fitur pengujian peta situs yang tersedia untuk umum. 

Mengapa Google terus meng-crawl halaman yang telah dihapus?

Google terus meng-crawl semua URL yang dikenal bahkan setelah URL menampilkan error 4XX untuk sementara waktu, jika ini merupakan error sementara. Satu-satunya kasus ketika URL tidak akan di-crawl adalah ketika URL menampilkan perintah noindex.

Agar tidak menampilkan daftar error 404 yang terus berkembang, laporan Cakupan Indeks hanya menyajikan URL yang telah menampilkan error 404 dalam sebulan terakhir.

Saya bisa melihat halaman saya, mengapa Google tidak bisa?

Gunakan Fitur Inspeksi URL untuk mengetahui apakah Google dapat melihat halaman aktif. Jika tidak bisa, fitur akan menjelaskan penyebabnya. Jika bisa, masalahnya kemungkinan terletak pada error akses yang telah diperbaiki sejak crawling terakhir. Jalankan crawling langsung menggunakan Fitur Inspeksi URL dan minta pengindeksan.

Fitur Inspeksi URL tidak menunjukkan masalah, tetapi laporan Cakupan Indeks menunjukkan error. Mengapa?

Anda mungkin telah memperbaiki error setelah URL di-crawl terakhir kali oleh Google. Lihatlah tanggal crawling URL Anda (yang seharusnya terlihat di halaman detail URL di laporan Cakupan Indeks maupun dalam tampilan versi yang diindeks di Fitur Inspeksi URL). Pastikan apakah Anda telah melakukan perbaikan sejak halaman tersebut di-crawl.

Alasan status

Berikut adalah kemungkinan alasan untuk setiap halaman Anda.

"Dikirim" vs "Tidak dikirim"

Kapan pun Anda melihat alasan indeks yang menggunakan kata "Dikirim", berarti Anda telah meminta Google untuk mengindeks URL secara eksplisit dengan menyertakannya ke peta situs. Setiap kali diberi label "Tidak terkirim" berarti Google menemukan URL tersebut sendiri (misalnya, dari link di halaman lain) dan tidak ada dalam peta situs yang diindeks.

Error


Halaman yang berisi error belum diindeks.


Error server (5xx): Server Anda menampilkan error level 500 saat halaman diminta. Lihat Memperbaiki error server.

Error pengalihan: URL adalah error pengalihan. Error ini mungkin termasuk salah satu jenis error berikut: error ini merupakan rantai pengalihan yang terlalu panjang; error ini merupakan pengalihan balik; URL alihan akhirnya melampaui batas panjang URL maks; terdapat URL yang buruk atau kosong dalam rantai pengalihan.

URL yang dikirimkan diblokir oleh robots.txt: Anda mengirim halaman untuk diindeks, namun halaman tersebut diblokir oleh robots.txt. Cobalah menguji halaman Anda menggunakan penguji robots.txt.

URL yang dikirimkan ditandai ‘noindex’: Anda mengirimkan halaman untuk diindeks, namun halaman tersebut memiliki perintah 'noindex' dalam tag meta atau header HTTP. Jika ingin halaman ini diindeks, Anda harus menghapus tag atau header HTTP.

URL yang dikirimkan tampaknya berupa Soft 404: Anda mengirimkan halaman untuk diindeks, namun server menampilkan URL yang tampaknya merupakan soft 404.

URL yang dikirimkan mengembalikan permintaan yang tidak diotorisasi (401): Anda mengirimkan halaman ini untuk diindeks, namun Google mendapat respons 401 (tidak diotorisasi). Hapus persyaratan otorisasi untuk halaman ini, atau izinkan Googlebot mengakses halaman Anda dengan memverifikasi identitasnya.

URL yang dikirimkan tidak ditemukan (404): Anda mengirimkan URL yang tidak ada untuk diindeks. Lihat Memperbaiki error 404.

URL yang dikirimkan memiliki masalah crawling: Anda mengirimkan halaman untuk diindeks, dan Google menemukan error crawling yang tidak ditentukan yang tidak termasuk dalam alasan lain mana pun. Coba jalankan proses debug halaman menggunakan fitur Inspeksi URL.

Peringatan


Halaman dengan status peringatan mungkin perlu Anda perhatikan, dan mungkin sudah atau belum diindeks, berdasarkan hasil tertentu.


Diindeks, meski diblokir oleh robots.txt: Halaman sudah diindeks, meskipun diblokir oleh robots.txt (Google selalu mematuhi robots.txt, namun tidak lagi jika seseorang menaut ke halaman tersebut). Kondisi ini ditandai sebagai peringatan karena kami tidak yakin apakah Anda sengaja memblokir halaman dari hasil penelusuran. Jika Anda memang ingin memblokir halaman ini, robots.txt bukanlah mekanisme yang tepat untuk mencegah agar halaman tidak diindeks. Agar halaman tidak diindeks, sebaiknya gunakan 'noindex' atau wajibkan autentikasi untuk melarang akses anonim. Anda dapat menggunakan penguji robots.txt untuk menentukan aturan mana yang memblokir halaman ini. Karena robots.txt, semua cuplikan yang ditampilkan untuk halaman mungkin akan kurang optimal. Jika tidak ingin memblokir halaman ini, perbarui file robots.txt agar pemblokiran halaman dibatalkan.

Valid


Halaman dengan status yang valid telah diindeks.

Dikirim dan diindeks: Anda mengirimkan URL untuk diindeks, dan URL telah diindeks.

Diindeks, tidak dikirimkan di peta situs: URL ditemukan oleh Google dan diindeks. Sebaiknya kirimkan semua URL penting menggunakan peta situs.

Dikecualikan


Halaman berikut ini umumnya tidak diindeks, dan menurut kami hal itu sudah tepat. Halaman ini adalah duplikat dari halaman yang sudah diindeks, atau diblokir dari pengindeksan oleh beberapa mekanisme di situs Anda, atau tidak diindeks karena alasan yang menurut kami bukanlah error.


Dikecualikan oleh tag ‘noindex’: Saat mencoba mengindeks halaman, Google menemukan perintah 'noindex' sehingga halaman tersebut tidak diindeks. Jika Anda memang tidak ingin halaman ini diindeks, perintah ini sudah sesuai. Jika ingin halaman ini diindeks, Anda harus menghapus perintah 'noindex'.

Diblokir oleh fitur penghapusan halaman: Halaman saat ini diblokir oleh permintaan penghapusan URL. Jika menjadi pemilik situs terverifikasi, Anda dapat menggunakan fitur penghapusan URL untuk melihat siapa saja yang mengajukan permintaan penghapusan URL. Permintaan penghapusan hanya berlaku sekitar 90 hari setelah tanggal penghapusan. Setelah melewati jangka waktu tersebut, Googlebot dapat kembali dan mengindeks halaman tersebut, meskipun Anda tidak mengirimkan lagi permintaan indeks. Jika Anda tidak ingin halaman diindeks, gunakan 'noindex', wajibkan otorisasi untuk halaman, atau hapus halaman tersebut.

Diblokir oleh robots.txt: Halaman ini menggunakan file robots.txt untuk memblokir Googlebot. Anda dapat memverifikasi halaman ini menggunakan penguji robots.txt. Perlu diketahui bahwa hal ini bukan berarti halaman tidak akan diindeks dengan beberapa cara lain. Jika Google dapat menemukan informasi lain tentang halaman ini tanpa memuatnya, halaman masih dapat diindeks (meskipun hal ini jarang terjadi). Untuk memastikan bahwa halaman tidak diindeks oleh Google, hapus pemblokiran robots.txt dan gunakan perintah 'noindex'.

Diblokir karena adanya permintaan yang tidak sah (401): Halaman menerapkan permintaan otorisasi untuk memblokir Googlebot (respons 401). Agar Googlebot dapat meng-crawl halaman ini, hapus persyaratan otorisasi, atau izinkan Googlebot mengakses halaman Anda.

Anomali crawling: Anomali yang tidak ditentukan terjadi saat mengambil URL ini. Hal ini bisa berarti kode respons level 4xx- atau 5xx-. Cobalah mengambil halaman menggunakan Fitur Inspeksi URL untuk melihat apakah halaman tersebut mengalami masalah dalam proses pengambilan. Halaman tersebut tidak diindeks.

Di-crawl - saat ini tidak diindeks: Halaman telah di-crawl oleh Google, tetapi tidak diindeks. Halaman ini mungkin diindeks atau mungkin tidak diindeks di masa mendatang; tidak perlu mengirim ulang URL ini untuk crawling.

Ditemukan - saat ini tidak diindeks: Halaman telah ditemukan oleh Google, tetapi belum di-crawl. Biasanya, Google mencoba meng-crawl URL namun situs kelebihan muatan; oleh karena itu, Google harus menjadwalkan ulang crawl. Itulah alasan tanggal crawl terakhir kosong di laporan.

Halaman alternatif dengan tag kanonis yang tepat: Halaman ini merupakan duplikat dari halaman yang dikenali oleh Google sebagai kanonis. Halaman ini mengarah ke halaman kanonis tersebut dengan benar, sehingga Anda tidak perlu melakukan apa pun.

Duplikat tanpa kanonis pilihan pengguna: Halaman memiliki duplikat, tetapi tidak ada yang ditandai sebagai kanonis. Kami menganggap halaman ini bukan halaman kanonis. Anda seharusnya menandai halaman ini sebagai kanonis secara eksplisit. Periksa URL ini untuk melihat URL kanonis yang dipilih oleh Google.

Duplikat, Google memilih versi kanonis yang berbeda dengan pengguna: Halaman ini ditandai sebagai kanonis untuk sekumpulan halaman, tetapi Google menganggap ada URL lain yang lebih tepat untuk dianggap sebagai versi kanonis. Google telah mengindeks halaman yang dianggap sebagai kanonis, dan bukan yang ini. Sebaiknya Anda menandai halaman ini sebagai duplikat URL kanonis dengan jelas. Halaman ini ditemukan tanpa permintaan crawl eksplisit. Periksa URL ini untuk melihat URL kanonis yang dipilih Google.

Tidak ditemukan (404): Halaman menampilkan error 404 saat diminta. Google menemukan URL ini tanpa ada permintaan eksplisit atau peta situs apa pun. Google mungkin telah menemukan URL ini sebagai link dari situs lain, atau mungkin halaman tersebut ada sebelumnya dan telah dihapus. Googlebot mungkin akan terus berupaya meng-crawl URL ini dalam jangka waktu tertentu; tidak ada cara lain untuk membuat Googlebot melupakan URL secara permanen, meskipun halaman akan lebih jarang di-crawl. Respons 404 tidak menjadi masalah, jika disengaja. Jika halaman Anda telah dipindahkan, gunakan pengalihan 301 ke lokasi baru. Baca Memperbaiki error 404

Halaman dihapus karena adanya keluhan hukum: Halaman telah dihapus dari indeks karena adanya keluhan hukum.

Halaman dengan pengalihan: URL ini adalah pengalihan dan tidak ditambahkan ke indeks.

Soft 404: Permintaan halaman menampilkan hal yang dianggap sebagai respons soft 404. Hal ini berarti bahwa halaman menampilkan pesan "tidak ditemukan" yang aman bagi pengguna tanpa kode respons 404 yang sesuai. Sebaiknya tampilkan kode respons 404 untuk halaman yang benar-benar "tidak ditemukan", atau tambahkan lebih banyak informasi ke halaman untuk memberi tahu kami bahwa itu bukan soft 404. Pelajari lebih lanjut

Duplikat, URL yang dikirim tidak dipilih sebagai kanonis: URL ini merupakan sekumpulan URL duplikat tanpa halaman kanonis yang ditandai secara eksplisit. Secara eksplisit Anda meminta URL ini untuk diindeks, namun karena URL tersebut adalah duplikat dan Google menganggap bahwa URL lain adalah kandidat yang lebih baik untuk kanonis, Google tidak mengindeks URL ini. Sebagai gantinya, kami mengindeks kanonis yang kami pilih. (Google hanya mengindeks halaman kanonis dalam sekumpulan duplikat.) Perbedaan antara status ini dan "Google memilih versi kanonis yang berbeda dengan pengguna" adalah bahwa, di sini Anda meminta pengindeksan secara eksplisit. Periksa URL ini untuk melihat URL kanonis yang dipilih oleh Google.

 

Masalah umum

Berikut adalah masalah umum pada Search Console baru versi beta ini. Anda tidak perlu melaporkannya kepada kami, namun kami mengharapkan masukan Anda terkait fitur atau masalah lain yang Anda temukan. Gunakan mekanisme Masukan di menu navigasi.

  • Pengindeksan data tidak diupdate setiap hari, sehingga data mungkin tertunda beberapa hari, dan beberapa titik data diinterpolasi.
  • Diagram harus mencakup 90 hari terakhir, namun saat ini mungkin kurang dari jumlah tersebut. 
  • Filter drop-down peta situs hanya mencakup peta situs yang dikirim menggunakan perintah robots.txt atau Search Console.
  • Daftar status sedang disempurnakan, dan mungkin berubah, misalnya, item yang berlabel Error mencampurkan berbagai jenis respons (4xx/5xx).
Apakah ini membantu?
Bagaimana cara meningkatkannya?