Memblokir pengindeksan penelusuran dengan 'noindex'

Anda dapat mencegah agar halaman tidak muncul di Google Penelusuran dengan menyertakan tag meta noindex di kode HTML halaman, atau dengan menampilkan header 'noindex' di permintaan HTTP. Saat Googlebot meng-crawl halaman tersebut lagi dan melihat tag atau header, Googlebot tidak akan memunculkan halaman tersebut secara menyeluruh di hasil Google Penelusuran, terlepas dari apakah situs lain menautkan ke halaman tersebut atau tidak.

Penting! Agar perintah noindex efektif, halaman tidak boleh diblokir oleh file robots.txt. Jika halaman diblokir oleh file robots.txt, crawler tidak akan pernah melihat perintah noindex, dan halaman tetap dapat muncul di hasil penelusuran, misalnya jika halaman lain menautkan ke halaman tersebut.

Menggunakan noindex akan berguna jika Anda tidak memiliki akses root ke server, karena noindex tersebut memungkinkan Anda mengontrol akses ke situs dengan basis halaman demi halaman.

Menerapkan noindex

Ada 2 cara untuk menerapkan noindex: sebagai tag meta dan sebagai header respons HTTP. Keduanya memiliki efek yang setara, namun Anda dapat memilih salah satu yang lebih nyaman untuk Anda berdasarkan kontrol yang Anda miliki atas server, dan proses publikasi tertentu.

Tag <meta>

Agar sebagian besar web crawler mesin telusur tidak mengindeks halaman di situs Anda, tempatkan tag meta berikut dalam bagian <head> halaman:

<meta name="robots" content="noindex">

Agar perayap web Google saja yang tidak mengindeks halaman di situs Anda:

<meta name="googlebot" content="noindex">

Perlu diketahui bahwa beberapa perayap web mesin telusur dapat menafsirkan perintah noindex secara berbeda. Oleh karena itu, kemungkinan halaman Anda masih muncul di hasil dari mesin telusur lain.

Baca selengkapnya tentang tag meta noindex.

Bantu kami melihat tag meta Anda

Kami harus meng-crawl halaman Anda untuk melihat tag meta Anda. Jika halaman Anda masih muncul di hasil penelusuran, hal ini mungkin terjadi karena kami belum meng-crawl situs Anda sejak tag tersebut ditambahkan. Anda dapat meminta Google kembali merayapi laman menggunakan alat Ambil sebagai Google. Alasan lainnya adalah karena file robots.txt mungkin memblokir URL ini dari perayap web Google, sehingga kami tidak dapat melihat tag. Untuk membatalkan pemblokiran laman Anda dari Google, Anda perlu mengedit file robots.txt. Anda dapat mengedit dan menguji robots.txt menggunakan fitur Penguji robots.txt.

Header respons HTTP

Selain tag meta, Anda juga dapat menampilkan header X-Robots-Tag dengan nilai noindex atau none di respons Anda. Berikut adalah contoh respons HTTP dengan X-Robots-Tag yang memerintahkan crawler untuk tidak mengindeks halaman:

HTTP/1.1 200 OK
(…)
X-Robots-Tag: noindex
(…)

Baca selengkapnya tentang header respons noindex.

BERIKUTNYA: MEMILIH TIDAK IKUT DARI TAMPILAN DI GOOGLE+ DAN PROPERTI GOOGLE LAINNYA

Apakah artikel ini membantu?
Bagaimana cara meningkatkannya?