Η Ανίχνευση ανωμαλιών είναι μια στατιστική τεχνική που χρησιμοποιεί το Analytics Intelligence για τον προσδιορισμό ανωμαλιών σε δεδομένα χρονικών σειρών για μια συγκεκριμένη μέτρηση, καθώς και ανωμαλιών σε ένα τμήμα στο ίδιο χρονικό σημείο.
Προσδιορισμός ανωμαλιών σε μετρήσεις με την πάροδο του χρόνου
Το Intelligence εφαρμόζει ένα μοντέλο χώρου καταστάσεων-χρονικών σειρών Bayes στα δεδομένα ιστορικού, για να προβλέψει την τιμή του πιο πρόσφατου σημείου δεδομένων στις χρονικές σειρές. Το μοντέλο παράγει μια πρόβλεψη και ένα αξιόπιστο διάστημα που χρησιμοποιούμε για να αξιολογήσουμε την παρατηρούμενη μέτρηση.
Το Analytics Intelligence, χρησιμοποιώντας δεδομένα ιστορικού, προβλέπει την αξία της μέτρησης στην τρέχουσα χρονική περίοδο και επισημαίνει το σημείο δεδομένων ως ανωμαλία αν η πραγματική τιμή δεν εμπίπτει στο αξιόπιστο διάστημα. Για την ανίχνευση ωριαίων ανωμαλιών, η περίοδος εκπαίδευσης είναι 2 εβδομάδες. Για την ανίχνευση ημερήσιων ανωμαλιών, η περίοδος εκπαίδευσης είναι 90 ημέρες. Για την ανίχνευση εβδομαδιαίων ανωμαλιών, η περίοδος εκπαίδευσης είναι 32 εβδομάδες.
Προσδιορισμός ανωμαλιών εντός τμήματος στο ίδιο χρονικό σημείο
Ενώ η ανίχνευση ανωμαλιών που βασίζεται σε χρονικές σειρές χρησιμοποιεί δεδομένα ιστορικού για να επισημάνει μία μέτρηση σε μία τιμή ιδιότητας, παρέχεται, επίσης, ταυτόχρονη ανίχνευση ανωμαλιών σε διάφορες μετρήσεις και τιμές ιδιοτήτων, σε ένα χρονικό σημείο.
Σε αυτήν την προσέγγιση χρησιμοποιούμε ανάλυση βασικών στοιχείων (PCA), για να αξιοποιήσουμε τη δομή συσχέτισης των μετρήσεων μαζί με τη διασταυρωμένη επικύρωση, για να επισημάνουμε ανωμαλίες.
Αρχικά, προσδιορίζουμε το σύνολο των ιδιοτήτων και των μετρήσεων που θα υποβληθούν στο PCA. Βάσει όλων των πιθανών τιμών ιδιοτήτων, δημιουργούμε πολλά τμήματα και, στη συνέχεια, κανονικοποιούμε κάθε μέτρηση βάσει του αριθμού των χρηστών σε ένα τμήμα. Στη συνέχεια, εκτελούμε το PCA για αυτά τα τμήματα και τις κανονικοποιημένες μετρήσεις. Αν κάποια συγκεκριμένα τμήματα επιδεικνύουν ανώμαλη συμπεριφορά σε οποιαδήποτε μέτρηση και περιλαμβάνουν τουλάχιστον το 0,05% των χρηστών σε αυτήν την ιδιοκτησία, τα συγκεκριμένα επιμέρους τμήματα παρουσιάζονται ως ανωμαλίες. Προς το παρόν, πραγματοποιούμε αυτήν την ανάλυση κάθε εβδομάδα.