Dalam artikel ini
Mengapa masalah ini terjadi
Beberapa produk Anda menggunakan halaman landing (melalui atribut link [link]) yang tidak dapat di-crawl oleh Google karena robots.txt menghalangi crawler Google untuk mendownload halaman landing. Produk ini akan tetap ditolak dan berhenti ditampilkan di iklan Shopping dan listingan produk gratis hingga kami dapat meng-crawl halaman landing.
Cara memperbaiki masalah
Harap perbarui file robots.txt di server web Anda agar crawler Google dapat mengambil halaman landing yang tersedia. File robots.txt biasanya dapat ditemukan di direktori utama di server web (misalnya, http://www.example.com/robots.txt).
Agar kami dapat mengakses seluruh situs Anda, pastikan file robots.txt Anda mengizinkan agen-pengguna 'Googlebot' (digunakan untuk halaman landing) dan 'Googlebot-image' (digunakan untuk gambar) untuk melakukan crawling di situs Anda sepenuhnya.
Anda dapat mengizinkan crawling situs lengkap dengan mengubah file robots.txt seperti berikut:
User-agent: Googlebot
Disallow:
User-agent: Googlebot-image
Disallow:
Anda dapat mempelajari lebih lanjut mengenai konfigurasi robots.txt di sini. Anda dapat menguji konfigurasi saat ini dengan Alat Inspeksi URL.
Memperbaiki produk satu per satu langsung di Merchant Center
Buka Produk di Merchant Center, lalu pilih tab Perlu diperhatikan.
Gunakan ikon filter di atas
tabel untuk menemukan semua produk yang terpengaruh oleh masalah Anda.
Klik judul produk yang ingin Anda perbaiki, lalu klik Edit produk.
Perbarui file robots.txt di server web Anda agar crawler Google dapat mengambil halaman landing yang tersedia untuk produk yang terpengaruh.
Pilih Simpan.
Memperbaiki beberapa produk sekaligus
Buka Produk di Merchant Center, lalu pilih tab Perlu diperhatikan.
Gunakan ikon filter di atas
tabel untuk menemukan semua produk yang terpengaruh oleh masalah Anda.
Pilih ikon download
untuk mendownload daftar (.csv) semua produk yang terpengaruh untuk semua masalah atau masalah ini saja.
Lakukan referensi silang pada daftar yang didownload dengan data produk yang Anda upload, dan perbarui file robots.txt di server web agar crawler Google dapat mengambil halaman landing yang tersedia untuk produk yang terpengaruh.
Upload ulang data produk yang sudah diperbaiki ke Merchant Center menggunakan metode upload yang dipilih.
Langkah berikutnya
Setelah melakukan perubahan yang diminta, periksa apakah masalahnya sudah diperbaiki dengan memastikannya tidak lagi tercantum di halaman "Perlu diperhatikan".
Catatan: Mungkin perlu waktu beberapa saat agar perubahan yang Anda buat terlihat di halaman “Perlu diperhatikan”.
Jika Anda telah menyelesaikan masalah dan memperbarui produk melalui upload feed terbaru atau Content API, error yang Anda lihat akan hilang dalam beberapa hari. Dalam periode tersebut, kami akan memastikan bahwa kami dapat meng-crawl halaman landing yang tersedia. Setelah itu, produk tersebut akan ditampilkan kembali di iklan Shopping dan listingan. Jika ingin mempercepat prosesnya, Anda dapat meningkatkan kecepatan crawling Google.