Googlebot सत्यापित करना

आप सत्यापित कर सकते हैं कि क्या आपके सर्वर को एक्सेस कर रहा वेब क्रॉलर वास्तव में Googlebot है (या कोई अन्य Google उपयोगकर्ता-एजेंट). अगर आप चिंतित हैं कि Googlebot होने का दावा करते हुए स्पैमर या दूसरे परेशान करने वाले आपकी साइट तक पहुंच रहे हैं, तो यह उपयोगी है. Google ऐसे IP पतों की सार्वजनिक सूची पोस्ट नहीं करता, जिनके लिए वेबमास्टर श्वेतसूची बना सके. ऐसा इसलिए क्योंकि इस IP पते की श्रेणियां बदल सकती हैं, जिसके कारण किसी भी ऐसे वेबमास्टर को समस्या होती है जिसने उन्हें हार्ड कोड किया है, इसलिए आपको आगे बताया गया DNS लुकअप चलाना होगा.

Googlebot को कॉलर के रूप में सत्यापित करने के लिए:

  1. host आदेश का उपयोग करके, अपने लॉग से एक्सेस करने वाले IP पते पर एक विपरीत DNS लुकअप चलाएं.
  2. सत्यापित करें कि या तो डोमेन नाम googlebot.com या फिर google.com है.
  3. पुनर्प्राप्त किए गए डोमेन नाम पर host आदेश का उपयोग करके चरण 1 में पुनर्प्राप्त किए गए डोमेन नाम पर फ़ॉरवर्ड DNS लुकअप चलाएं. सत्यापित करें कि यह आपके लॉग के मूल एक्सेस करने वाले IP पते के समान है.

उदाहरण 1:

> host 66.249.66.1
1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com.

> host crawl-66-249-66-1.googlebot.com
crawl-66-249-66-1.googlebot.com has address 66.249.66.1

 

उदाहरण 2:

> host 66.249.90.77
77.90.249.66.in-addr.arpa domain name pointer rate-limited-proxy-66-249-90-77.google.com.

> host rate-limited-proxy-66-249-90-77.google.com
rate-limited-proxy-66-249-90-77.google.com has address 66.249.90.77

 

क्या यह उपयोगी था?
हम उसे किस तरह बेहतर बना सकते हैं?