Το πρόγραμμα ανίχνευσης, το οποίο ονομάζεται και spider ή bot, είναι το λογισμικό που χρησιμοποιεί η Google για την επεξεργασία και την ευρετηρίαση του περιεχομένου ιστοσελίδων. Το πρόγραμμα ανίχνευσης περιεχομένου επισκέπτεται τον ιστότοπό σας, για να καθορίζει το περιεχόμενό του και να προβάλλει συναφείς διαφημίσεις.
Ακολουθούν ορισμένα σημαντικά στοιχεία που θα πρέπει να γνωρίζετε σχετικά με το πρόγραμμα ανίχνευσης περιεχομένου:
- Η αναφορά του προγράμματος ανίχνευσης ενημερώνεται εβδομαδιαίως.
Η ανίχνευση εκτελείται αυτόματα και δεν είναι δυνατή η ικανοποίηση αιτημάτων για συχνότερη ανίχνευση. - Το πρόγραμμα ανίχνευσης περιεχομένου διαφέρει από το πρόγραμμα ανίχνευσης του Google.
Τα δύο προγράμματα ανίχνευσης είναι ξεχωριστά, ωστόσο μοιράζονται μια κρυφή μνήμη. Αυτό συμβαίνει, για να μη ζητούν τις ίδιες σελίδες, βοηθώντας έτσι τους εκδότες να διατηρούν το εύρος ζώνης τους. Αντίστοιχα, το πρόγραμμα ανίχνευσης του Search Console είναι ξεχωριστό. - Με την επίλυση ζητημάτων του προγράμματος ανίχνευσης περιεχομένου δεν επιλύονται ζητήματα ανίχνευσης του Google.
Η επίλυση των ζητημάτων που αναφέρονται στη σελίδα Πρόσβαση του προγράμματος ανίχνευσης δεν θα επηρεάζει την τοποθέτησή σας στα αποτελέσματα Αναζήτησης Google. Για περισσότερες πληροφορίες σχετικά με την κατάταξη του ιστοτόπου σας στο Google, ανατρέξτε στο άρθρο του AdSense σχετικά με τη συμπερίληψη στα αποτελέσματα Αναζήτησης Google. - Η ευρετηρίαση από το πρόγραμμα ανίχνευσης γίνεται βάσει URL.
Το πρόγραμμα ανίχνευσης αποκτά ξεχωριστή πρόσβαση στις διευθύνσεις site.com και www.site.com. Ωστόσο, το πρόγραμμα ανίχνευσης δεν καταγράφει ξεχωριστά τους ιστοτόπους site.com και site.com/#anchor. - Το πρόγραμμα ανίχνευσης δεν αποκτά πρόσβαση σε σελίδες ή καταλόγους που απαγορεύονται από το αρχείο robots.txt.
Τα προγράμματα ανίχνευσης Mediapartners του Google και του AdMob συμμορφώνονται με το αρχείο robots.txt. Αν το αρχείο robot.txt απαγορεύει την πρόσβαση σε συγκεκριμένες σελίδες ή καταλόγους, τότε δεν θα ανιχνευτούν.Έχετε υπόψη ότι αν προβάλλετε διαφημίσεις σε σελίδες που έχουν αποκλειστεί από το αρχείο robots.txt με τη γραμμή User-agent: *, τότε το πρόγραμμα ανίχνευσης περιεχομένου θα εξακολουθεί να ανιχνεύει αυτές τις σελίδες. Για να εμποδίσετε την πρόσβαση του προγράμματος ανίχνευσης περιεχομένου στις σελίδες σας, πρέπει να ορίσετεUser-agent: Mediapartners-Googleστο αρχείο robots.txt. Μάθετε περισσότερα. - Το πρόγραμμα ανίχνευσης θα επιχειρεί να αποκτήσει πρόσβαση μόνο στα URL όπου έχουν υλοποιηθεί οι ετικέτες διαφημίσεων.
Αιτήματα προς τα συστήματά μας μπορούν να αποστέλλουν μόνο οι σελίδες που προβάλλουν διαφημίσεις Google και μόνο αυτές θα ανιχνεύονται. - Το πρόγραμμα ανίχνευσης θα επιχειρεί να αποκτήσει πρόσβαση σε σελίδες ανακατεύθυνσης.
Όταν υπάρχουν "αρχικές σελίδες" οι οποίες ανακατευθύνουν σε άλλες σελίδες, το πρόγραμμα ανίχνευσης πρέπει να αποκτά πρόσβαση στις αρχικές σελίδες, για να διαπιστώνει ότι πραγματοποιείται ανακατεύθυνση. Συνεπώς, η επίσκεψη του προγράμματος ανίχνευσης στις αρχικές σελίδες θα εμφανίζεται στα αρχεία καταγραφής σχετικά με την πρόσβαση. - Εκ νέου ανίχνευση ιστοτόπων
Προς το παρόν, δεν είναι δυνατός ο έλεγχος της συχνότητας με την οποία τα προγράμματα ανίχνευσης ευρετηριάζουν το περιεχόμενο στον ιστότοπό σας. Η ανίχνευση γίνεται αυτόματα από τα bot. Αν κάνετε αλλαγές σε μια σελίδα, μπορεί να χρειαστούν μία έως δύο εβδομάδες, μέχρι να εμφανιστούν οι αλλαγές στο ευρετήριό μας.