Google không thể thu thập dữ liệu trên trang web của bạn và không thể thu thập thông tin về các thành phần 3D. Để cho phép Google truy cập vào nội dung của bạn, hãy đảm bảo rằng tệp robots.txt cho phép tác nhân người dùng "Googlebot" thu thập dữ liệu trang web của bạn.
Bạn có thể thực hiện việc này bằng cách thêm các dòng sau vào tệp robots.txt:
User-agent: Googlebot
Không cho phép:
Tìm hiểu thêm về Giao thức loại trừ cho robot
Sau khi bạn tải lên và kiểm tra tệp robots.txt, trình thu thập dữ liệu của Google sẽ tự động tìm và bắt đầu sử dụng tệp robots.txt của bạn. Bạn không cần phải làm gì cả. Nếu bạn đã cập nhật tệp robots.txt và bạn cần làm mới bản sao được lưu vào bộ nhớ đệm của Google càng sớm càng tốt, hãy tìm hiểu cách gửi tệp robots.txt đã cập nhật.
Google có thể sử dụng thông tin thu thập được từ các tác nhân người dùng này hoặc các tác nhân người dùng khác để cải thiện hệ thống Google Ads của chúng tôi.