Memverifikasi Googlebot

Anda dapat memverifikasi apakah perayap web yang mengakses server Anda adalah benar-benar Googlebot (atau agen pengguna Google) lainnya. Hal ini akan berguna jika Anda khawatir para pelaku spam atau pembuat masalah lainnya akan mengakses situs Anda sembari mengaku sebagai Googlebot. Google tidak mengeposkan daftar publik alamat IP untuk webmaster ke daftar putih. Hal ini karena cakupan alamat IP dapat berubah, yang menyebabkan masalah bagi webmaster yang telah melakukan pengkodean keras, sehingga Anda perlu menjalankan pencarian DNS seperti yang dijelaskan selanjutnya.

Untuk memverifikasi Googlebot sebagai penelepon:

  1. Jalankan pencarian DNS terbalik di alamat IP pengaksesan dari log Anda, menggunakan perintah host.
  2. Verifikasi bahwa nama domain berada dalam googlebot.com atau google.com.
  3. Jalankan pencarian DNS maju pada nama domain yang diambil pada langkah 1 menggunakan perintah host pada nama domain yang diambil. Verifikasi bahwa alamat tersebut sama dengan alamat IP pengaksesan asli dari log Anda.

Contoh 1:

> host 66.249.66.1
1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.

> host crawl-66-249-66-1.googlebot.com
crawl-66-249-66-1.googlebot.com has address 66.249.66.1

 

Contoh 2:

> host 66.249.90.77
77.90.249.66.in-addr.arpa domain name pointer rate-limited-proxy-66-249-90-77.google.com.

> host rate-limited-proxy-66-249-90-77.google.com
rate-limited-proxy-66-249-90-77.google.com has address 66.249.90.77

 

Apakah artikel ini membantu?
Bagaimana cara meningkatkannya?