Google आपकी वेबसाइट को क्रॉल नहीं कर सकता और 3D ऐसेट के बारे में जानकारी इकट्ठा नहीं कर सकता. Google को अपने कॉन्टेंट का ऐक्सेस देने के लिए, यह पक्का करें कि robots.txt फ़ाइल, उपयोगकर्ता-एजेंट "Googlebot" को आपकी साइट क्रॉल करने की अनुमति देती हो.
ऐसा करने के लिए, अपनी robots.txt फ़ाइल में ये लाइनें जोड़ें:
उपयोगकर्ता-एजेंट : Googlebot
अनुमति नहीं है:
रोबोट एक्सक्लूज़न प्रोटोकॉल के बारे में ज़्यादा जानें
robots.txt फ़ाइल को अपलोड करने और उसकी जांच करने के बाद, Google के क्रॉलर अपने-आप आपकी robots.txt फ़ाइल को ढूंढकर, उसका इस्तेमाल करना शुरू कर देंगे. आपको कुछ नहीं करना है. अगर आपने अपनी robots.txt फ़ाइल अपडेट कर ली है और आपको Google की कैश मेमोरी में सेव किए गए डेटा की कॉपी को जल्द से जल्द रीफ़्रेश करना है, तो अपडेट की गई robots.txt फ़ाइल को सबमिट करने का तरीका जानें.
Google, ऊपर बताए गए उपयोगकर्ता-एजेंट या दूसरे किसी उपयोगकर्ता-एजेंट से मिली जानकारी का इस्तेमाल, Google Ads सिस्टम को बेहतर बनाने के लिए कर सकता है.