Τι σημαίνει όταν ένα τεστ προβλέπει κάτι

Η έρευνα για την προσωπικότητα δείχνει ότι η ευσυνειδησία προβλέπει την εργασιακή απόδοση. Διαβάζοντας αυτή την πρόταση, οι περισσότεροι φαντάζονται κάτι πολύ ισχυρότερο από αυτό που δείχνουν τα δεδομένα. Στο χάσμα ανάμεσα στον στατιστικό ισχυρισμό και την καθημερινή σημασία του «προβλέπει» αρχίζει το μεγαλύτερο μέρος της κακής χρήσης των ψυχολογικών τεστ.

Οι αριθμοί

Τα μεγέθη επίδρασης στην έρευνα για την προσωπικότητα αναφέρονται συνήθως ως συσχετίσεις. Οι τιμές από μετα-αναλύσεις για καλά τεκμηριωμένες σχέσεις τείνουν να κυμαίνονται μεταξύ 0,20 και 0,35. Η συσχέτιση μεταξύ ευσυνειδησίας και εργασιακής απόδοσης βρίσκεται περίπου στο 0,20 με 0,25. Μεταξύ εργασιακής ικανοποίησης και εργασιακής απόδοσης βρίσκεται περίπου στο 0,30. Η γενική νοητική ικανότητα, ο ισχυρότερος μεμονωμένος προγνωστικός παράγοντας στον τομέα, φτάνει περίπου στο 0,50 για σύνθετες εργασίες.

Αν υψώσετε μια συσχέτιση στο τετράγωνο, βρίσκετε το ποσοστό της διακύμανσης που εξηγεί. Μια συσχέτιση 0,25 εξηγεί περίπου το έξι τοις εκατό των διαφορών μεταξύ των ανθρώπων. Το ενενήντα τέσσερα τοις εκατό οφείλεται σε κάτι άλλο: ικανότητα, ευκαιρίες, εκπαίδευση, διοίκηση, υγεία, τύχη.

Γιατί το 0,25 παραμένει πραγματικό εύρημα

Σε επίπεδο πληθυσμού, οι μικρές συσχετίσεις παράγουν σημαντικές συνολικές επιδράσεις. Αν επιλέγετε χίλια άτομα, ένας προγνωστικός παράγοντας με συσχέτιση 0,25 βελτιώνει το μέσο αποτέλεσμά σας με τρόπο μετρήσιμο και επαναλαμβανόμενο. Ασφαλιστικές εταιρείες και επιδημιολόγοι στηρίζουν ολόκληρες πρακτικές σε επιδράσεις αυτού του μεγέθους.

Το κρίσιμο σημείο είναι ότι το συνολικό όφελος και η πρόβλεψη για ένα άτομο είναι διαφορετικά μεγέθη. Μια συσχέτιση 0,25 σημαίνει ότι, μεταξύ των ατόμων με υψηλή βαθμολογία, περισσότερα θα έχουν καλή απόδοση από ό,τι μεταξύ εκείνων με χαμηλή βαθμολογία. Σημαίνει επίσης ότι πολλά άτομα με υψηλή βαθμολογία θα έχουν χαμηλή απόδοση και πολλά με χαμηλή βαθμολογία θα διαπρέψουν. Και οι δύο διαπιστώσεις προκύπτουν από τον ίδιο αριθμό.

Η ατομική περίπτωση

Αυτό είναι το βήμα που παραλείπεται. Μια συσχέτιση περιγράφει τη σχέση μεταξύ δύο κατανομών. Δεν δικαιολογεί έναν ισχυρισμό για κάποιο συγκεκριμένο άτομο.

Αν η ευσυνειδησία παρουσιάζει συσχέτιση 0,25 με την απόδοση, τότε το να γνωρίζετε τη βαθμολογία κάποιου στην ευσυνειδησία περιορίζει μόνο ελαφρώς το εύρος της πιθανής απόδοσής του. Το διάστημα πρόβλεψης για ένα άτομο παραμένει τόσο ευρύ ώστε να περιλαμβάνει σχεδόν όλο το εύρος των πιθανών αποτελεσμάτων. Αν μάθετε ότι βρίσκεστε στο 80ο εκατοστημόριο στην ευσυνειδησία, αυτό σας λέει πολύ λίγα για το πώς θα τα πάτε σε μια συγκεκριμένη θέση εργασίας.

Γι' αυτό η χρήση βαθμολογιών προσωπικότητας ως βασικού φίλτρου επιλογής δεν στηρίζεται επαρκώς από τα δεδομένα, ακόμη και όταν η έρευνα στην οποία βασίζονται είναι αξιόπιστη. Η έρευνα στηρίζει τον ισχυρισμό ότι το γνώρισμα έχει σημασία. Δεν στηρίζει τον ισχυρισμό ότι μια βαθμολογία δείχνει τι θα κάνει ένας υποψήφιος.

Δύο ακόμη επισημάνσεις

Η πρόβλεψη και η πρόκληση ενός αποτελέσματος είναι διαφορετικά πράγματα. Σχεδόν όλη η σχετική βιβλιογραφία αφορά συσχετίσεις. Το ότι η ευσυνειδησία προβλέπει αποτελέσματα υγείας είναι συμβατό με το ενδεχόμενο να οδηγεί σε καλύτερες συμπεριφορές υγείας, με το ενδεχόμενο ένας τρίτος παράγοντας να προκαλεί και τα δύο, αλλά και με την αντίστροφη αιτιότητα. Οι διαχρονικές μελέτες περιορίζουν τις πιθανές εξηγήσεις, αλλά σπάνια τις αποκλείουν οριστικά.

Όταν τα κριτήρια βασίζονται σε αυτοαναφορά, οι τιμές διογκώνονται. Όταν τόσο ο προγνωστικός παράγοντας όσο και το αποτέλεσμα δηλώνονται από το ίδιο άτομο το ίδιο απόγευμα, η διακύμανση λόγω κοινής μεθόδου αυξάνει τη συσχέτιση. Οι μελέτες που χρησιμοποιούν αντικειμενικά αποτελέσματα ή αξιολογήσεις από τρίτους συνήθως αναφέρουν μικρότερες επιδράσεις, και σε αυτές πρέπει να δίνεται μεγαλύτερη βαρύτητα.

Σε τι χρησιμεύει πραγματικά μια βαθμολογία

Αν διαβαστεί ως περιγραφή και όχι ως προφητεία, μια βαθμολογία τεστ είναι πραγματικά χρήσιμη. Σας δείχνει πού βρίσκεστε σε σχέση με έναν πληθυσμό αναφοράς ως προς ένα γνώρισμα με τεκμηριωμένες συνέπειες και σας δίνει τις λέξεις για να περιγράψετε ένα μοτίβο που ίσως είχατε παρατηρήσει χωρίς να μπορείτε να το ονομάσετε.

Αυτό έχει αξία. Είναι κάτι διαφορετικό από μια πρόβλεψη, και μια ειλικρινής αναφορά οφείλει να σας εξηγεί αυτή τη διάκριση, αντί να σας αφήνει να τη συμπεράνετε μόνοι σας.