Laporan Status Cakupan Indeks

Pelajari halaman mana yang telah diindeks dan masalah yang dihadapi saat mengindeks situs Anda.

 

LAPORAN CAKUPAN INDEKS

 

Memahami laporan

Laporan ini akan jauh lebih mudah dipahami jika Anda sudah membaca cara kerja Google Penelusuran sebelumnya.

Laporan ini menampilkan status pengindeksan semua URL yang telah Google kunjungi, atau coba kunjungi, di properti Anda. Halaman ringkasan menampilkan hasil untuk semua URL di properti Anda, yang dikelompokkan berdasarkan status (error, peringatan, atau valid) dan alasan spesifik untuk status tersebut (seperti URL yang dikirim tidak ditemukan (404)). Klik baris tabel di halaman ringkasan untuk melihat semua URL dengan status/alasan yang sama dan detail selengkapnya tentang masalah tersebut.

 

Apakah saya memerlukan laporan ini?

Jika situs Anda berisi kurang dari 500 halaman, Anda mungkin tidak perlu menggunakan laporan ini Sebaliknya, akan lebih mudah untuk menelusuri situs Anda di Google dengan memasukkan situs:your_site , dengan "your_site" adalah URL beranda situs Anda tanpa awalan "http://" atau "https://". Misalnya, site:example.com atau site:example.com/petstore. Hasil penelusuran menunjukkan halaman yang diketahui Google di situs Anda. Anda dapat menambahkan istilah penelusuran untuk menemukan halaman tertentu di situs Anda, misalnya site:example.com/petstore iguanas zebras.

 

Halaman ringkasan

Laporan tingkat teratas menampilkan status indeks dari semua halaman di situs Anda yang sudah dicoba di-crawl oleh Google dan dikelompokkan berdasarkan status dan alasan.

Yang perlu diperhatikan

Biasanya, Anda akan melihat peningkatan secara bertahap jumlah halaman valid yang diindeks seiring dengan berkembangnya situs. Jika melihat penurunan atau lonjakan, lihat bagian pemecahan masalah. Tabel status di halaman ringkasan dikelompokkan dan diurutkan berdasarkan "status+alasan"; Anda harus memperbaiki error yang paling berdampak terlebih dahulu.

Yang tidak perlu diperhatikan

  • Anda tidak perlu mengharapkan semua URL di situs Anda diindeks. Sasaran Anda adalah mendapatkan versi kanonis  setiap halaman yang diindeks. Setiap halaman duplikat atau alternatif dalam laporan ini akan diberi label "Dikecualikan". Halaman duplikat atau alternatif pada intinya memiliki konten yang sama dengan halaman kanonis. Menandai halaman sebagai duplikat atau alternatif adalah hal yang baik, yang mengindikasikan bahwa kami telah menemukan halaman kanonisnya dan telah mengindeksnya. Anda dapat menemukan halaman kanonis untuk URL apa pun dengan menjalankan Fitur Inspeksi URL. Lihat alasan lain mengapa halaman mungkin hilang.
  • Saat Anda menambahkan konten baru, Google akan memerlukan waktu beberapa hari untuk mengindeksnya. Anda dapat mengurangi keterlambatan pengindeksan dengan meminta pengindeksan.

Status

Setiap halaman dapat memiliki salah satu dari nilai status berikut:

  • Error: Halaman tidak diindeks. Lihat deskripsi jenis error spesifik untuk mempelajari lebih lanjut tentang error yang terjadi dan cara memperbaikinya. Anda harus memprioritaskan masalah ini terlebih dahulu.
  • Peringatan: Halaman diindeks, tetapi memiliki masalah yang harus Anda waspadai.
  • Dikecualikan: Halaman tidak diindeks, tetapi mungkin saja karena Anda menghendakinya demikian. (Misalnya, Anda mungkin sengaja mengecualikannya dengan perintah noindex, atau itu mungkin duplikat halaman kanonis yang telah kami indeks di situs Anda.)
  • Valid: Halaman diindeks.

Alasan

Setiap status (error, peringatan valid, dikecualikan) memiliki alasan khusus untuk status tersebut. Lihat Deskripsi jenis status di bawah untuk mengetahui deskripsi setiap jenis status dan cara menanganinya.

Validasi

Status validasi untuk masalah ini. Anda harus memprioritaskan perbaikan masalah yang ada di status validasi "gagal" atau "tidak dimulai".

Tentang validasi

Setelah memperbaiki semua instance masalah khusus di situs, Anda dapat meminta Google memvalidasi perubahan. Jika semua instance yang diketahui sudah tidak ada, masalah akan ditandai sebagai diperbaiki pada tabel status dan dipindahkan ke bagian bawah tabel. Search Console memantau status validasi masalah secara keseluruhan, serta status setiap instance masalah. Jika semua instance masalah sudah tidak ada, masalah akan dianggap telah diperbaiki. (Untuk rekaman status aktual, lihat Status validasi masalah dan Status validasi instance.)

Selengkapnya tentang masa aktif masalah...

Masa aktif masalah dimulai sejak pertama kali instance dari masalah tersebut terdeteksi di situs, hingga 90 hari setelah instance terakhir ditandai sebagai sudah tidak ada di situs. Jika 90 hari berlalu tanpa ada perulangan, masalah akan dihapus dari histori laporan.

Tanggal pertama kali terdeteksinya masalah adalah waktu pertama kali masalah terdeteksi selama masa aktif masalah, dan tidak mengalami perubahan. Jadi:

  • Jika semua instance masalah telah diperbaiki, namun ada instance masalah yang baru terjadi 15 hari kemudian, masalah akan ditandai sebagai terbuka, dan tanggal "pertama kali terdeteksi" tetap menjadi tanggal aslinya.
  • Jika masalah yang sama terjadi 91 hari setelah instance terakhir diperbaiki, masalah sebelumnya akan ditutup, dan masalah ini dicatat sebagai masalah baru, dengan tanggal terdeteksi pertama kali ditetapkan pada "hari ini".

Alur validasi dasar

Berikut ini ringkasan proses validasi setelah Anda mengklik Validasi Perbaikan untuk masalah. Proses ini dapat memerlukan waktu beberapa hari, dan Anda akan menerima pemberitahuan progres melalui email.

  1. Saat Anda mengklik Validasi Perbaikan, Search Console langsung memeriksa beberapa halaman.
    • Jika instance saat ini ada di salah satu halaman tersebut, validasi akan berakhir, dan status validasi tetap tidak berubah.
    • Jika halaman contoh tidak memiliki error saat ini, validasi akan dilanjutkan dengan status Dimulai. Jika validasi menemukan masalah lain yang tidak terkait, masalah tersebut akan dianggap sebagai jenis masalah lain dan validasi dilanjutkan.
  2. Search Console bekerja melalui daftar URL yang diketahui, yang terpengaruh oleh masalah ini. Antrean untuk crawling ulang hanya berisi URL dengan instance masalah yang diketahui, bukan keseluruhan situs. Search Console menyimpan rekaman semua URL yang diperiksa pada histori validasi, yang dapat dibuka di halaman detail masalah.
  3. Saat URL diperiksa:
    1. Jika masalah tidak ditemukan, status validasi instance berubah menjadi Lulus. Jika ini adalah instance pertama yang diperiksa setelah validasi dimulai, status validasi masalah berubah menjadi Terlihat bagus.
    2. Jika URL tidak lagi dapat dijangkau, status validasi instance berubah menjadi Lainnya (bukan merupakan status error).
    3. Jika instance masih ada, status masalah berubah menjadi Gagal dan validasi berakhir. Jika ini adalah halaman baru yang ditemukan oleh crawling normal, halaman ini akan dianggap sebagai instance lain dari masalah yang ada.
  4. Jika semua URL peringatan dan error telah diperiksa dan jumlah masalahnya bernilai 0, status masalah akan berubah menjadi Lulus. Penting: Meskipun jumlah halaman yang terpengaruh berkurang hingga 0 dan status masalah berubah menjadi Lulus, label tingkat keparahan asli akan tetap ditampilkan (Error atau Peringatan).

Meskipun Anda tidak pernah mengklik "mulai validasi" Google dapat mendeteksi instance masalah yang telah diperbaiki. Jika Google mendeteksi bahwa semua instance masalah telah diperbaiki selama crawl regulernya, status masalah akan berubah menjadi "T/A" pada laporan.

Kapan masalah dianggap sebagai "diperbaiki" untuk URL atau item?

Masalah ditandai sebagai diperbaiki untuk URL atau item saat salah satu ketentuan berikut terpenuhi:

  • Saat URL di-crawl dan masalahnya tidak ditemukan lagi di halaman. Untuk error tag AMP, hal ini dapat berarti bahwa Anda telah memperbaiki tag atau tag tersebut telah dihapus (jika tag tidak diwajibkan). Selama upaya validasi, status masalah akan dianggap sebagai "lulus".
  • Jika halaman tidak tersedia untuk Google dengan alasan apa pun (halaman dihapus, ditandai noindex, perlu autentikasi, dan sebagainya), masalah tersebut akan dianggap sebagai diperbaiki untuk URL tersebut. Selama upaya validasi dilakukan, masalah akan dianggap dalam status validasi "lainnya".

Validasi ulang

Saat Anda mengklik Validasi ulang untuk validasi yang gagal, validasi akan dimulai ulang untuk semua instance yang gagal, serta instance baru apa pun dari masalah ini yang ditemukan melalui crawling normal.

Anda harus menunggu siklus validasi selesai sebelum meminta siklus validasi lagi, meskipun Anda telah memperbaiki beberapa masalah selama siklus saat ini.

Instance yang telah lulus validasi (ditandai sebagai Lulus) atau tidak dapat dijangkau lagi (ditandai sebagai Lainnya) tidak akan diperiksa lagi dan dihapus dari histori saat Anda mengklik Validasi ulang.

Histori validasi

Anda dapat melihat progres permintaan validasi dengan mengklik link detail validasi di halaman detail masalah.

Entri di halaman histori validasi dikelompokkan berdasarkan URL untuk laporan AMP dan laporan Status Indeks. Dalam laporan Kegunaan Seluler dan Hasil Kaya, item dikelompokkan berdasarkan kombinasi URL + item data terstruktur (seperti yang ditentukan berdasarkan nilai Nama item). Status validasi berlaku untuk masalah tertentu yang Anda periksa. Anda dapat memiliki satu masalah berlabel "Lulus" di halaman, tetapi masalah lainnya berlabel "Gagal", "Tertunda", atau "Lainnya".

Status validasi masalah

Status validasi berikut berlaku untuk masalah tertentu:

  • Belum dimulai: Ada 1 atau lebih dari 1 halaman dengan instance masalah ini yang belum pernah Anda coba validasi. Langkah berikutnya:
    1. Klik masalah untuk mempelajari detail error-nya. Periksa setiap halaman untuk melihat contoh error pada halaman aktif menggunakan Pengujian AMP. (Jika Pengujian AMP tidak menampilkan error pada halaman, ini terjadi karena Anda telah memperbaiki error pada halaman aktif setelah Google menemukan error dan membuat laporan masalah ini.)
    2. Klik "Pelajari lebih lanjut" pada halaman detail untuk melihat detail aturan yang telah dilanggar.
    3. Klik contoh baris URL pada tabel untuk mendapatkan detail tentang error tersebut.
    4. Perbaiki halaman, lalu klik Validasi perbaikan agar Google meng-crawl ulang halaman. Google akan memberi tahu Anda tentang progres validasi. Validasi dapat memakan waktu beberapa hari hingga kira-kira 2 minggu, jadi harap bersabar. 
  • Dimulai: Anda telah memulai upaya validasi dan belum ada sisa instance masalah yang ditemukan. Langkah berikutnya: Google akan mengirimkan pemberitahuan saat validasi diproses, yang memberi tahu Anda tindakan yang harus dilakukan, jika perlu.
  • Terlihat bagus: Anda telah memulai upaya validasi, dan semua instance masalah yang diperiksa telah diperbaiki. Langkah berikutnya: Tidak ada tindakan yang harus dilakukan, namun Google akan mengirimkan pemberitahuan saat validasi diproses, yang memberi tahu Anda tentang tindakan yang harus dilakukan.
  • Lulus: Semua instance masalah yang diketahui sudah tidak ada (atau URL yang terpengaruh tidak tersedia lagi). Status ini muncul karena Anda telah mengklik "Validasi perbaikan" (jika instance tidak muncul tanpa adanya permintaan validasi, statusnya akan berubah menjadi T/A). Langkah berikutnya: Tidak ada lagi tindakan yang harus dilakukan.
  • T/A: Google mendapati bahwa masalah telah diperbaiki pada semua URL, meskipun Anda belum pernah memulai upaya validasi. Langkah berikutnya: Tidak ada lagi tindakan yang harus dilakukan.
  • Gagal: Ambang batas tertentu dari halaman masih berisi masalah ini, setelah Anda mengklik "Validasi". Langkah berikutnya: Perbaiki masalah dan validasi ulang.

Status validasi instance

Setelah validasi diminta, setiap instance masalah yang diketahui akan diberi salah satu status validasi berikut untuk masalah tertentu (status Lulus dan Lainnya tidak digunakan dalam laporan Status Indeks):

  • Validasi tertunda: Menunggu proses validasi. Terakhir kali Google memeriksanya, instance masalah ini sudah ada.
  • Lulus: Google memeriksa instance masalah, namun instance tersebut sudah tidak ada. Status ini hanya bisa didapatkan jika Anda secara eksplisit mengklik Validasi untuk instance masalah ini.
  • Gagal: Google memeriksa instance masalah, dan instance tersebut masih ada. Status ini hanya bisa didapatkan jika Anda secara eksplisit mengklik Validasi untuk instance masalah ini.
  • Lainnya: Google tidak dapat menjangkau URL yang menghosting instance, atau (untuk data terstruktur) tidak dapat menemukan item di halaman tersebut lagi. Dianggap setara dengan Lulus.

Perlu diketahui bahwa URL yang sama dapat memiliki status yang berbeda untuk masalah yang berbeda; Misalnya, jika sebuah halaman memiliki masalah X dan masalah Y, masalah X dapat memiliki status validasi Lulus dan masalah Y pada halaman yang sama dapat memiliki status validasi Tertunda.

Filter drop-down penemuan URL

Gunakan filter drop-down di atas diagram untuk memfilter hasil indeks berdasarkan cara Google menemukan URL. Tersedia nilai berikut:

  • Semua halaman yang diketahui [Default] - Menampilkan semua URL yang ditemukan oleh Google melalui cara apa pun.
  • Semua halaman yang dikirimkan - Hanya menampilkan halaman yang dikirimkan dalam peta situs ke laporan ini atau dengan ping peta situs.
  • URL peta situs tertentu - Hanya menampilkan URL yang tercantum dalam peta situs tertentu yang dikirimkan menggunakan laporan ini. Termasuk URL apa pun dalam peta situs bertingkat.

URL dianggap telah dikirimkan oleh peta situs meskipun URL tersebut juga ditemukan dengan beberapa mekanisme lain (misalnya melalui crawling organik dari halaman lain).

Halaman detail

Klik baris di halaman ringkasan untuk membuka halaman detail kombinasi status + alasan tersebut. Anda dapat melihat detail masalah yang dipilih dengan mengklik Pelajari lebih lanjut di halaman detail.

Grafik di halaman ini menunjukkan jumlah halaman yang terpengaruh dari waktu ke waktu.

Tabel menunjukkan daftar contoh halaman yang dipengaruhi oleh masalah ini:

  • Buka URL di tabel dengan mengklik link anchor di baris tabel.
  • Periksa URL di tabel dengan mengklik ikon periksa di baris tabel.
  • Setelah memperbaiki semua instance error atau peringatan yang muncul, Anda dapat meminta Google untuk memvalidasi perbaikan yang telah dilakukan.

URL ditandai dengan masalah yang telah Anda perbaiki? Mungkin Anda memperbaiki masalah SETELAH terakhir kali URL tersebut di-crawl oleh Google. Oleh karena itu, jika masalah yang telah Anda perbaiki sebelumnya pada sebuah URL masih terlihat, pastikan untuk memeriksa tanggal crawling URL tersebut. Periksa dan konfirmasikan perbaikan yang Anda lakukan, lalu minta pengindeksan ulang.

 

Membagikan laporan

Anda dapat membagikan detail masalah dengan mengklik tombol Bagikan di halaman. Link ini hanya memberikan akses ke halaman saat ini dan halaman histori validasi untuk masalah ini kepada siapa pun yang memiliki link. Link tidak memberikan akses ke halaman lain resource Anda atau memungkinkan pengguna bersama melakukan tindakan apa pun di properti atau akun Anda. Anda dapat mencabut link kapan saja dengan menonaktifkan fitur berbagi untuk halaman ini.

Pemecahan masalah

Berikut adalah beberapa masalah pengindeksan paling umum yang mungkin Anda lihat dalam laporan ini:

Penurunan total halaman yang diindeks tanpa error yang sesuai

Jika melihat penurunan jumlah total halaman yang diindeks tanpa error terkait, Anda mungkin memblokir akses ke halaman yang ada (via robots.txt, 'noindex', atau login yang diperlukan), tetapi hanya untuk halaman yang belum Anda kirimkan untuk diindeks. Jika Anda telah mengirimkan halaman ini untuk diindeks, Anda akan melihat sekumpulan error yang sesuai. Lihat URL yang Dikecualikan untuk mengetahui lonjakan yang terkait dengan penurunan total halaman Anda yang diindeks.

Lebih banyak halaman Dikecualikan daripada halaman Valid

Jika Anda melihat lebih banyak halaman Dikecualikan daripada halaman Valid, lihat alasan pengecualian. Alasan pengecualian biasanya meliputi:

  • Anda memiliki aturan robots.txt yang memblokir Google agar tidak meng-crawl bagian besar situs Anda. Jika Anda memblokir halaman yang salah, buka blokirannya.
  • Situs Anda memiliki sangat banyak halaman duplikat, mungkin karena halaman tersebut menggunakan parameter untuk memfilter atau mengurutkan koleksi umum (misalnya: type=dress atau color=green atau sort=price ). Jika halaman hanya menampilkan konten sama yang diurutkan atau difilter dengan cara yang berbeda, halaman tersebut mungkin sebaiknya dikecualikan. Jika Anda adalah pengguna tingkat lanjut, dan Anda merasa bahwa Google salah memahami parameter di situs Anda, Anda dapat menggunakan fitur Parameter URL untuk menyesuaikan penanganan parameter situs.
Lonjakan error

Lonjakan error mungkin disebabkan oleh perubahan pada template Anda, yang dalam hal ini memunculkan error baru, atau Anda mungkin telah mengirimkan peta situs berisi URL yang tidak dapat di-crawl (misalnya, oleh robots.txt atau noindex, atau persyaratan login). Klik masalahnya, lalu periksa halaman untuk melihat apa error-nya.

Jika Anda melihat lonjakan error:

  1. Coba temukan keterkaitan jumlah total error pengindeksan atau jumlah total halaman yang diindeks, dengan garis lonjakan di samping baris error tertentu pada halaman ringkasan sebagai petunjuk atas masalah mana yang mungkin memengaruhi total error atau jumlah total halaman yang diindeks.
  2. Klik baris error apa pun yang tampaknya berkontribusi terhadap lonjakan error Anda untuk membuka halaman detail dengan informasi selengkapnya. Baca deskripsi tentang jenis error tertentu untuk mempelajari cara penanganan terbaik.
  3. Perbaiki semua error yang muncul, lalu minta validasi dengan mengklik Validasi Perbaikan di halaman detail karena alasan tersebut. Baca selengkapnya tentang validasi.
  4. Anda akan mendapatkan pemberitahuan saat validasi diproses, namun Anda dapat memeriksa kembali setelah beberapa hari untuk mengetahui apakah jumlah error telah berkurang.
  5. Secara berkala, hapus filter untuk URL yang dikecualikan, urutkan URL berdasarkan jumlah halaman yang terpengaruh, lalu pindai URL untuk masalah yang tidak diinginkan.
Error server
Error server berarti Googlebot tidak dapat mengakses URL Anda, waktu permintaan habis, atau situs Anda sedang sibuk. Akibatnya, Googlebot terpaksa membatalkan permintaan.

Menguji konektivitas server

Anda dapat menggunakan Fitur Inspeksi URL untuk melihat apakah Anda dapat mereproduksi error server yang dilaporkan oleh laporan Status Cakupan Indeks.

Memperbaiki error konektivitas server

  • Kurangi pemuatan halaman yang berlebihan untuk permintaan halaman dinamis.
    Situs yang menayangkan konten serupa untuk beberapa URL dianggap menayangkan konten secara dinamis (misalnya, www.example.com/shoes.php?color=red&size=7 menayangkan konten yang sama dengan www.example.com/shoes.php?size=7&color=red).  Halaman dinamis dapat memakan waktu yang terlalu lama untuk merespons, yang mengakibatkan masalah waktu tunggu habis. Atau, server dapat menampilkan status kelebihan beban, yang meminta Googlebot meng-crawl situs dengan lebih lambat. Secara umum, disarankan agar daftar parameter tetap singkat dan daftar digunakan dengan efektif. Jika yakin tentang cara kerja parameter di situs, Anda dapat memberi tahu Google cara menangani parameter ini.
  • Pastikan server hosting situs Anda aktif, tidak kelebihan beban, atau tidak salah konfigurasi.
    Jika terdapat masalah sambungan, waktu tunggu, atau respons, periksa penghosting web Anda dan pertimbangkanlah untuk meningkatkan kemampuan situs Anda dalam menangani lalu lintas.
  • Periksa apakah Anda tidak sengaja memblokir Google.
    Anda mungkin telah memblokir Google karena ada masalah di tingkat sistem, seperti masalah konfigurasi DNS, firewall atau sistem perlindungan DoS yang salah konfigurasi, atau konfigurasi sistem pengelolaan konten. Sistem perlindungan merupakan bagian penting hosting yang baik dan sering kali dikonfigurasi untuk memblokir permintaan server yang sangat tinggi yang tidak biasa secara otomatis. Akan tetapi, karena Googlebot sering melakukan permintaan lebih banyak daripada pengguna manusia, tindakan ini dapat memicu sistem perlindungan tersebut, yang menyebabkannya pemblokiran Googlebot dan membuatnya tidak dapat meng-crawl situs Anda. Untuk memperbaiki masalah tersebut, identifikasi bagian mana dari infrastruktur situs web Anda yang memblokir Googlebot dan hentikan pemblokiran tersebut. Mungkin Anda tidak dapat mengontrol firewall, sehingga Anda harus membicarakannya dengan penyedia hosting.
  • Kontrol pengindeksan dan crawling situs mesin telusur dengan bijak.
    Beberapa webmaster mencegah Googlebot meng-crawl situsnya dengan sengaja, mungkin menggunakan firewall seperti yang disebutkan di atas. Dalam kasus ini, biasanya tujuannya bukan untuk memblokir Googlebot sepenuhnya, namun untuk mengontrol cara situs di-crawl dan diindeks. Jika ini terjadi pada Anda, periksa berikut ini:
Error 404

Anda disarankan untuk memperbaiki halaman error 404 saja, bukan halaman dikecualikan 404. URL error 404 adalah URL yang Anda secara eksplisit meminta Google untuk mengindeksnya, tetapi tidak ditemukan. URL dikecualikan 404 adalah URL yang ditemukan Google melalui sejumlah mekanisme lainnya.

Berikut ini cara menangani error 404:

  1. Tentukan apakah error tersebut memang perlu diperbaiki atau tidak. Banyak (mungkin sebagian besar) error 404 tidak perlu diperbaiki karena 404 tidak membahayakan pengindeksan atau peringkat situs Anda.
    • Jika itu adalah URL yang dikirimkan (error), sebaiknya diperbaiki.
    • Jika halaman yang dihapus tidak memiliki pengganti atau halaman yang setara, menampilkan error 404 adalah hal yang tepat. Laporan akan berhenti menampilkan error 404 setelah sekitar satu bulan.
    • Anda tidak perlu khawatir jika error 404 merupakan URL buruk yang dihasilkan oleh skrip, atau URL tidak pernah ada di situs Anda. Mungkin error 404 yang ada di laporan cukup mengganggu Anda, tetapi Anda tidak perlu memperbaikinya, kecuali URL adalah link yang salah eja (lihat di bawah). Error 404 harus dihapus dari laporan setelah sekitar satu bulan.
  2. Jika URL dikirimkan untuk pengindeksan (statusnya adalah Error),
    1. Periksa URL untuk melihat asal pengirimannya dengan mengklik ikon kirim di samping URL Telusuri dan lihat informasi Discovery. Perbarui peta situs seperlunya.
    2. Jika konten dipindahkan, tambahkan pengalihan.
    3. Jika Anda telah menghapus konten secara permanen dan tidak ingin menggantinya dengan konten terkait yang lebih baru, biarkan URL lama menampilkan error 404 atau 410. Saat ini Google memperlakukan 410 (Hilang) sama dengan 404 (Tidak ditemukan). Menampilkan kode selain 404 atau 410 untuk halaman yang tidak ada (atau mengalihkan pengguna ke halaman lain, seperti beranda, dan tidak menampilkan 404) dapat menimbulkan masalah. Halaman semacam ini dikenal sebagai 404 ringan, yang dapat membingungkan pengguna dan mesin telusur.
    4. Jika URL tidak diketahui: Terkadang Anda mungkin melihat error 404 untuk URL yang tidak pernah ada di situs Anda. Error ini dapat terjadi ketika seseorang menjelajah ke URL yang tidak ada di situs Anda - mungkin seseorang salah menuliskan URL di browser, atau seseorang salah menuliskan URL link. Jika itu adalah error yang sangat umum, Anda dapat membuat pengalihan untuk URL.
      URL yang tidak diharapkan ini mungkin dibuat oleh Googlebot yang mencoba mengikuti link yang ditemukan di JavaScript, file Flash, maupun konten lain yang disematkan, atau yang mungkin hanya ada di peta situs. Misalnya, situs Anda dapat menggunakan kode seperti ini untuk melacak file hasil download di Google Analytics:
      <a href="helloworld.pdf"
        onClick="_gaq.push(['_trackPageview','/download-helloworld']);">
        Hello World PDF</a>

      Saat melihat kode ini, Googlebot mungkin mencoba meng-crawl URL http://www.example.com/download-helloworld, meskipun URL tersebut bukan halaman sebenarnya. Dalam hal ini, link mungkin muncul sebagai error 404 (Tidak Ditemukan) di laporan Error Crawl. Google terus berusaha mencegah agar error crawl semacam ini tidak terjadi lagi. Error ini tidak memengaruhi crawling atau penentuan peringkat situs Anda.

  3. Jangan membuat konten palsu, mengalihkan ke beranda, atau menggunakan robots.txt untuk memblokir 404—semua hal tersebut menyulitkan kami untuk mengenali struktur situs dan memprosesnya dengan benar. Kami menyebutnya error 404 ringan.(Setelah berhasil meng-crawl URL, Google dapat mencoba meng-crawl URL tersebut selamanya. Menggunakan pengalihan 300 tingkat akan menunda upaya crawling ulang, mungkin untuk waktu yang sangat lama.) Mengirimkan permintaan penghapusan URL menggunakan fitur penghapusan URL tidak akan menghapus error dari laporan ini.
Halaman atau situs tidak muncul

Jika halaman Anda tidak ada dalam laporan, salah satu hal berikut mungkin benar:

  • Google tidak mengetahui halaman tersebut. Beberapa catatan tentang kemampuan halaman untuk dapat ditemukan:
    • Jika halaman ini merupakan situs atau halaman baru, perlu diingat bahwa Google memerlukan waktu untuk menemukan dan meng-crawl situs atau halaman baru.
    • Agar Google dapat mempelajari suatu halaman, Anda harus mengirimkan peta situs atau permintaan crawling halaman, jika tidak, Google harus menemukan link ke halaman Anda di suatu tempat.
    • Setelah URL halaman diketahui, perlu beberapa saat (hingga beberapa minggu) sebelum Google meng-crawl sebagian atau seluruh situs Anda.
    • Pengindeksan tidak pernah instan, bahkan saat Anda mengirim permintaan crawling secara langsung.
  • Google tidak dapat menjangkau halaman Anda (halaman memerlukan login atau tidak tersedia untuk semua pengguna di internet)
  • Halaman memiliki tag noindex yang mencegah Google mengindeksnya, atau
  • Halaman dihapus dari indeks karena beberapa alasan.

Langkah perbaikan:

Gunakan Fitur Inspeksi URL untuk menguji masalah pada halaman Anda. Jika halaman tidak terdapat di dalam laporan Cakupan Indeks, tetapi laporan dicantumkan sebagai diindeks dalam laporan Inspeksi URL, halaman tersebut mungkin baru saja diindeks, dan akan segera muncul dalam laporan Cakupan Indeks. Jika halaman dicantumkan sebagai tidak diindeks di fitur Inspeksi URL (yang Anda harapkan), uji halaman aktif. Hasil pengujian halaman aktif harus menunjukkan masalahnya: menggunakan informasi dari pengujian dan dokumentasi pengujian untuk mempelajari cara memperbaiki masalah tersebut.

FAQ

Mengapa halaman saya diindeks? Saya tidak menginginkannya.

Google dapat mengindeks URL apa pun yang ditemukannya, kecuali jika Anda menyertakan perintah noindex pada halaman tersebut (atau telah diblokir sementara), dan Google dapat menemukan halaman dengan berbagai cara, termasuk seseorang yang menghubungkan ke halaman Anda dari situs lain.

  • Jika ingin halaman Anda diblokir dari hasil Google Penelusuran, Anda dapat meminta semacam login untuk halaman tersebut, atau Anda dapat menggunakan perintah noindex pada halaman.
  • Jika ingin halaman Anda dihapus dari hasil Google Penelusuran setelah ditemukan, Anda harus mengikuti langkah-langkah ini.

Mengapa situs saya belum diindeks ulang belakangan ini?

Google mengindeks ulang halaman berdasarkan beberapa kriteria, seperti seberapa sering halaman tersebut berubah menurut perhitungan Google. Jika situs Anda tidak sering berubah, hal ini mungkin disebabkan oleh rasio pembaruan yang lebih lambat. Pada dasarnya, bukan menjadi masalah jika halaman Anda belum berubah. Jika menurut Anda situs memerlukan refresh, minta Google untuk meng-crawl ulang.

Bisakah Anda meng-crawl ulang halaman/situs saya?

Minta Google untuk meng-crawl ulang.

Mengapa begitu banyak halaman saya yang dikecualikan?

Lihatlah alasan pengecualian yang diperinci dalam laporan Cakupan Indeks. Sebagian besar pengecualian disebabkan oleh salah satu alasan berikut:

  • Anda memiliki aturan robots.txt yang memblokir Google agar tidak meng-crawl sebagian besar situs Anda. Gunakan Fitur Inspeksi URL untuk memastikan masalahnya.
  • Situs Anda memiliki banyak halaman duplikat, biasanya karena menggunakan parameter untuk memfilter atau mengurutkan koleksi yang sama (misalnya: type=dress atau color=green atau sort=price). Halaman-halaman tersebut akan diberi label sebagai "duplikat" atau "alternatif" dalam laporan Cakupan Indeks.
  • URL halaman tersebut dialihkan ke URL lain. URL pengalihan tidak diindeks, sedangkan target pengalihan diindeks.

Google tidak dapat mengakses peta situs saya

Pastikan peta situs Anda tidak diblokir oleh robots.txt, valid, dan Anda menggunakan URL yang tepat di entri robots.txt Anda atau pengiriman laporan Peta Situs. Uji URL peta situs Anda menggunakan fitur pengujian peta situs yang tersedia untuk umum. 

Mengapa Google terus meng-crawl halaman yang telah dihapus?

Google terus meng-crawl semua URL yang dikenal bahkan setelah URL menampilkan error 4XX untuk sementara waktu, jika ini merupakan error sementara. Satu-satunya kasus ketika URL tidak akan di-crawl adalah ketika URL menampilkan perintah noindex.

Agar tidak menampilkan daftar error 404 yang terus berkembang, laporan Cakupan Indeks hanya menyajikan URL yang telah menampilkan error 404 dalam sebulan terakhir.

Saya bisa melihat halaman saya, mengapa Google tidak bisa?

Gunakan Fitur Inspeksi URL untuk mengetahui apakah Google dapat melihat halaman aktif. Jika tidak bisa, fitur akan menjelaskan penyebabnya. Jika bisa, masalahnya kemungkinan terletak pada error akses yang telah diperbaiki sejak crawling terakhir. Jalankan crawling langsung menggunakan Fitur Inspeksi URL dan minta pengindeksan.

Fitur Inspeksi URL tidak menunjukkan masalah, tetapi laporan Cakupan Indeks menunjukkan error. Mengapa?

Anda mungkin telah memperbaiki error setelah URL di-crawl terakhir kali oleh Google. Lihatlah tanggal crawling URL Anda (yang seharusnya terlihat di halaman detail URL di laporan Cakupan Indeks maupun dalam tampilan versi yang diindeks di Fitur Inspeksi URL). Pastikan apakah Anda telah melakukan perbaikan sejak halaman tersebut di-crawl.

Bagaimanakah cara menemukan status indeks dari URL tertentu?

Untuk mempelajari status indeks URL tertentu, gunakan Fitur Inspeksi URL. Anda tidak dapat mencari atau memfilter berdasarkan URL di laporan Cakupan Indeks.

Alasan status

Berikut adalah kemungkinan alasan untuk setiap status masalah:

"Dikirim" vs "Tidak dikirim"

Kapan pun Anda melihat alasan indeks yang menggunakan kata "Dikirim", berarti Anda telah meminta Google untuk mengindeks URL secara eksplisit dengan menyertakannya ke peta situs. Setiap kali diberi label "Tidak terkirim" berarti Google menemukan URL tersebut sendiri (misalnya, dari link di halaman lain) dan tidak ada dalam peta situs yang diindeks.

Error


Halaman yang berisi error belum diindeks.


Error server (5xx): Server Anda menampilkan error level 500 saat halaman diminta. Lihat Memperbaiki error server.

Error pengalihan: URL adalah error pengalihan. Error ini mungkin termasuk salah satu jenis error berikut: error ini merupakan rantai pengalihan yang terlalu panjang; error ini merupakan pengalihan balik; URL alihan akhirnya melampaui batas panjang URL maks; terdapat URL yang buruk atau kosong dalam rantai pengalihan.

URL yang dikirimkan diblokir oleh robots.txt: Anda mengirim halaman untuk diindeks, namun halaman tersebut diblokir oleh robots.txt. Cobalah menguji halaman Anda menggunakan penguji robots.txt.

URL yang dikirimkan ditandai ‘noindex’: Anda mengirimkan halaman untuk diindeks, namun halaman tersebut memiliki perintah 'noindex' dalam tag meta atau header HTTP. Jika ingin halaman ini diindeks, Anda harus menghapus tag atau header HTTP.

URL yang dikirimkan tampaknya berupa Soft 404: Anda mengirimkan halaman untuk diindeks, namun server menampilkan URL yang tampaknya merupakan soft 404.

URL yang dikirimkan mengembalikan permintaan yang tidak diotorisasi (401): Anda mengirimkan halaman ini untuk diindeks, namun Google mendapat respons 401 (tidak diotorisasi). Hapus persyaratan otorisasi untuk halaman ini, atau izinkan Googlebot mengakses halaman Anda dengan memverifikasi identitasnya.

URL yang dikirimkan tidak ditemukan (404): Anda mengirimkan URL yang tidak ada untuk diindeks. Lihat Memperbaiki error 404.

URL yang dikirimkan memiliki masalah crawling: Anda mengirimkan halaman untuk diindeks, dan Google menemukan error crawling yang tidak ditentukan yang tidak termasuk dalam alasan lain mana pun. Coba jalankan proses debug halaman menggunakan fitur Inspeksi URL.

Peringatan


Halaman dengan status peringatan mungkin perlu Anda perhatikan, dan mungkin sudah atau belum diindeks, berdasarkan hasil tertentu.


Diindeks, meski diblokir oleh robots.txt: Halaman sudah diindeks, meskipun diblokir oleh robots.txt (Google selalu mematuhi robots.txt, namun tidak lagi jika seseorang menaut ke halaman tersebut). Kondisi ini ditandai sebagai peringatan karena kami tidak yakin apakah Anda sengaja memblokir halaman dari hasil penelusuran. Jika Anda memang ingin memblokir halaman ini, robots.txt bukanlah mekanisme yang tepat untuk mencegah agar halaman tidak diindeks. Agar halaman tidak diindeks, sebaiknya gunakan 'noindex' atau wajibkan autentikasi untuk melarang akses anonim. Anda dapat menggunakan penguji robots.txt untuk menentukan aturan mana yang memblokir halaman ini. Karena robots.txt, semua cuplikan yang ditampilkan untuk halaman mungkin akan kurang optimal. Jika tidak ingin memblokir halaman ini, perbarui file robots.txt agar pemblokiran halaman dibatalkan.

Valid


Halaman dengan status yang valid telah diindeks.

Dikirim dan diindeks: Anda mengirimkan URL untuk diindeks, dan URL telah diindeks.

Diindeks, tidak dikirimkan di peta situs: URL ditemukan oleh Google dan diindeks. Sebaiknya kirimkan semua URL penting menggunakan peta situs.

Dikecualikan


Halaman berikut ini umumnya tidak diindeks, dan menurut kami hal itu sudah tepat. Halaman ini adalah duplikat dari halaman yang sudah diindeks, atau diblokir dari pengindeksan oleh beberapa mekanisme di situs Anda, atau tidak diindeks karena alasan yang menurut kami bukanlah error.


Dikecualikan oleh tag ‘noindex’: Saat mencoba mengindeks halaman, Google menemukan perintah 'noindex' sehingga halaman tersebut tidak diindeks. Jika Anda memang tidak ingin halaman ini diindeks, perintah ini sudah sesuai. Jika ingin halaman ini diindeks, Anda harus menghapus perintah 'noindex'.

Diblokir oleh fitur penghapusan halaman: Halaman saat ini diblokir oleh permintaan penghapusan URL. Jika menjadi pemilik situs terverifikasi, Anda dapat menggunakan fitur penghapusan URL untuk melihat siapa saja yang mengajukan permintaan penghapusan URL. Permintaan penghapusan hanya berlaku sekitar 90 hari setelah tanggal penghapusan. Setelah melewati jangka waktu tersebut, Googlebot dapat kembali dan mengindeks halaman tersebut, meskipun Anda tidak mengirimkan lagi permintaan indeks. Jika Anda tidak ingin halaman diindeks, gunakan 'noindex', wajibkan otorisasi untuk halaman, atau hapus halaman tersebut.

Diblokir oleh robots.txt: Halaman ini menggunakan file robots.txt untuk memblokir Googlebot. Anda dapat memverifikasi halaman ini menggunakan penguji robots.txt. Perlu diketahui bahwa hal ini bukan berarti halaman tidak akan diindeks dengan beberapa cara lain. Jika Google dapat menemukan informasi lain tentang halaman ini tanpa memuatnya, halaman masih dapat diindeks (meskipun hal ini jarang terjadi). Untuk memastikan bahwa halaman tidak diindeks oleh Google, hapus pemblokiran robots.txt dan gunakan perintah 'noindex'.

Diblokir karena adanya permintaan yang tidak sah (401): Halaman menerapkan permintaan otorisasi untuk memblokir Googlebot (respons 401). Agar Googlebot dapat meng-crawl halaman ini, hapus persyaratan otorisasi, atau izinkan Googlebot mengakses halaman Anda.

Anomali crawling: Anomali yang tidak ditentukan terjadi saat mengambil URL ini. Hal ini bisa berarti kode respons level 4xx- atau 5xx-. Cobalah mengambil halaman menggunakan Fitur Inspeksi URL untuk melihat apakah halaman tersebut mengalami masalah dalam proses pengambilan. Halaman tersebut tidak diindeks.

Di-crawl - saat ini tidak diindeks: Halaman telah di-crawl oleh Google, tetapi tidak diindeks. Halaman ini mungkin diindeks atau mungkin tidak diindeks di masa mendatang; tidak perlu mengirim ulang URL ini untuk crawling.

Ditemukan - saat ini tidak diindeks: Halaman telah ditemukan oleh Google, tetapi belum di-crawl. Biasanya, Google mencoba meng-crawl URL namun situs kelebihan muatan; oleh karena itu, Google harus menjadwalkan ulang crawl. Itulah alasan tanggal crawl terakhir kosong di laporan.

Halaman alternatif dengan tag kanonis yang tepat: Halaman ini merupakan duplikat dari halaman yang dikenali oleh Google sebagai kanonis. Halaman ini mengarah ke halaman kanonis tersebut dengan benar, sehingga Anda tidak perlu melakukan apa pun.

Duplikat tanpa kanonis pilihan pengguna: Halaman memiliki duplikat, tetapi tidak ada yang ditandai sebagai kanonis. Kami menganggap halaman ini bukan halaman kanonis. Anda seharusnya menandai halaman ini sebagai kanonis secara eksplisit. Periksa URL ini untuk melihat URL kanonis yang dipilih oleh Google.

Duplikat, Google memilih versi kanonis yang berbeda dengan pengguna: Halaman ini ditandai sebagai kanonis untuk sekumpulan halaman, tetapi Google menganggap ada URL lain yang lebih tepat untuk dianggap sebagai versi kanonis. Google telah mengindeks halaman yang dianggap sebagai kanonis, dan bukan yang ini. Sebaiknya Anda menandai halaman ini sebagai duplikat URL kanonis dengan jelas. Halaman ini ditemukan tanpa permintaan crawl eksplisit. Periksa URL ini untuk melihat URL kanonis yang dipilih Google.

Tidak ditemukan (404): Halaman menampilkan error 404 saat diminta. Google menemukan URL ini tanpa ada permintaan eksplisit atau peta situs apa pun. Google mungkin telah menemukan URL ini sebagai link dari situs lain, atau mungkin halaman tersebut ada sebelumnya dan telah dihapus. Googlebot mungkin akan terus berupaya meng-crawl URL ini dalam jangka waktu tertentu; tidak ada cara lain untuk membuat Googlebot melupakan URL secara permanen, meskipun halaman akan lebih jarang di-crawl. Respons 404 tidak menjadi masalah, jika disengaja. Jika halaman Anda telah dipindahkan, gunakan pengalihan 301 ke lokasi baru. Baca Memperbaiki error 404

Halaman dihapus karena adanya keluhan hukum: Halaman telah dihapus dari indeks karena adanya keluhan hukum.

Halaman dengan pengalihan: URL ini adalah pengalihan dan tidak ditambahkan ke indeks.

Soft 404: Permintaan halaman menampilkan hal yang dianggap sebagai respons soft 404. Hal ini berarti bahwa halaman menampilkan pesan "tidak ditemukan" yang aman bagi pengguna tanpa kode respons 404 yang sesuai. Sebaiknya tampilkan kode respons 404 untuk halaman yang benar-benar "tidak ditemukan", atau tambahkan lebih banyak informasi ke halaman untuk memberi tahu kami bahwa itu bukan soft 404. Pelajari lebih lanjut

Duplikat, URL yang dikirim tidak dipilih sebagai kanonis: URL ini merupakan sekumpulan URL duplikat tanpa halaman kanonis yang ditandai secara eksplisit. Secara eksplisit Anda meminta URL ini untuk diindeks, namun karena URL tersebut adalah duplikat dan Google menganggap bahwa URL lain adalah kandidat yang lebih baik untuk kanonis, Google tidak mengindeks URL ini. Sebagai gantinya, kami mengindeks kanonis yang kami pilih. (Google hanya mengindeks halaman kanonis dalam sekumpulan duplikat.) Perbedaan antara status ini dan "Google memilih versi kanonis yang berbeda dengan pengguna" adalah bahwa, di sini Anda meminta pengindeksan secara eksplisit. Periksa URL ini untuk melihat URL kanonis yang dipilih oleh Google.

 

Masalah umum

Berikut adalah masalah umum pada Search Console. Anda tidak perlu melaporkannya kepada kami, namun kami mengharapkan masukan Anda terkait fitur atau masalah lain yang Anda temukan. Gunakan mekanisme Masukan di menu navigasi.

  • Pengindeksan data tidak diupdate setiap hari, sehingga data mungkin tertunda beberapa hari, dan beberapa titik data diinterpolasi.
  • Diagram harus mencakup 90 hari terakhir, namun saat ini mungkin kurang dari jumlah tersebut. 
  • Filter drop-down peta situs hanya mencakup peta situs yang dikirim menggunakan perintah robots.txt atau Search Console.
  • Daftar status sedang disempurnakan, dan mungkin berubah, misalnya, item yang berlabel Error mencampurkan berbagai jenis respons (4xx/5xx).
Apakah ini membantu?
Bagaimana cara meningkatkannya?