Τι είναι η αξιοπιστία στα ψυχολογικά τεστ;
Η αξιοπιστία αφορά τη συνέπεια της μέτρησης, όχι την ορθότητά της. Ένα τεστ μπορεί να έχει υψηλή αξιοπιστία και παρ' όλα αυτά να μετρά κάτι άλλο από αυτό που πρέπει. Γι' αυτό η αξιοπιστία είναι το πρώτο ερώτημα που τίθεται, αλλά ποτέ το τελευταίο.
Η αξιοπιστία είναι ο βαθμός στον οποίο μια μέτρηση μπορεί να επαναληφθεί με το ίδιο αποτέλεσμα, αντί να παρουσιάζει τυχαίες διακυμάνσεις. Αν ζυγιζόσασταν τρεις φορές μέσα σε ένα λεπτό και βλέπατε 71, 78 και 66 κιλά, η ζυγαριά θα ήταν αναξιόπιστη και δεν θα μπορούσατε να μάθετε από αυτήν το πραγματικό σας βάρος. Η ψυχολογική μέτρηση αντιμετωπίζει το ίδιο πρόβλημα με πολύ λιγότερο ακριβή μέσα.
Το κρίσιμο για την αξιοπιστία είναι να κατανοήσετε τι δεν συνεπάγεται. Μια ζυγαριά μπάνιου που δείχνει σταθερά οκτώ κιλά παραπάνω είναι απολύτως αξιόπιστη και εντελώς λανθασμένη. Η αξιοπιστία αφορά τη συνέπεια. Το αν ο αριθμός μετρά πράγματι αυτό που πρέπει είναι ξεχωριστό ζήτημα, που ονομάζεται εγκυρότητα. Η αξιοπιστία είναι απαραίτητη για την εγκυρότητα, αλλά απέχει πολύ από το να αρκεί για αυτήν.
Οι μορφές της
Η εσωτερική συνέπεια εξετάζει κατά πόσον τα ερωτήματα μιας κλίμακας συμφωνούν μεταξύ τους. Αν δέκα ερωτήματα υποτίθεται ότι μετρούν το ίδιο υποκείμενο γνώρισμα, όσοι δίνουν απαντήσεις που δείχνουν υψηλό επίπεδο σε ένα από αυτά θα πρέπει να τείνουν να δίνουν αντίστοιχες απαντήσεις και στα υπόλοιπα. Συνήθως εκφράζεται με τον συντελεστή άλφα του Cronbach ή, ακόμη καλύτερα, με τον συντελεστή ωμέγα του McDonald.
Η αξιοπιστία επαναληπτικής χορήγησης εξετάζει κατά πόσον το ίδιο άτομο λαμβάνει παρόμοια βαθμολογία σε δύο διαφορετικές περιστάσεις. Αυτή είναι η σημαντικότερη μορφή για τα γνωρίσματα, τα οποία εξ ορισμού θεωρούνται σταθερά. Είναι επίσης η μορφή που συχνότερα δεν αναφέρεται, επειδή απαιτεί να εντοπιστούν ξανά οι ίδιοι συμμετέχοντες εβδομάδες αργότερα.
Η αξιοπιστία μεταξύ αξιολογητών έχει σημασία όταν άνθρωποι βαθμολογούν το εργαλείο, όπως σε κλινικές συνεντεύξεις, προβολικές τεχνικές και παρατήρηση της συμπεριφοράς. Εξετάζει κατά πόσον δύο εκπαιδευμένοι αξιολογητές καταλήγουν στο ίδιο συμπέρασμα όταν εξετάζουν το ίδιο υλικό.
Η αξιοπιστία ισοδύναμων μορφών εξετάζει κατά πόσον δύο διαφορετικές εκδοχές του ίδιου τεστ, σχεδιασμένες ώστε να είναι ισοδύναμες, δίνουν τις ίδιες βαθμολογίες. Έχει σημασία όταν ένα τεστ χορηγείται περισσότερες από μία φορές και η προηγούμενη έκθεση στα ερωτήματα αποτελεί ζήτημα.
Πώς να διαβάζετε τους αριθμούς
Οι συντελεστές αξιοπιστίας κυμαίνονται από 0 έως 1. Τα συνήθη όρια είναι κατά προσέγγιση και συχνά χρησιμοποιούνται λανθασμένα. Σε γενικές γραμμές, τιμή πάνω από 0,90 απαιτείται όταν μια βαθμολογία επηρεάζει τη ζωή ενός ατόμου, τιμή από 0,80 έως 0,90 είναι ικανοποιητική για τις περισσότερες πρακτικές εφαρμογές, τιμή από 0,70 έως 0,80 είναι αποδεκτή για έρευνα και συγκρίσεις ομάδων, ενώ τιμή κάτω από 0,70 σημαίνει ότι η βαθμολογία περιέχει περισσότερη τυχαία διακύμανση από όση μπορούν να αντέξουν τα περισσότερα συμπεράσματα.
Δύο επισημάνσεις σχετικά με αυτά τα όρια. Πρώτον, είναι συμβάσεις, όχι νόμοι. Το αποδεκτό επίπεδο εξαρτάται αποκλειστικά από τη χρήση της βαθμολογίας. Δεύτερον, μια πολύ υψηλή τιμή άλφα σε μια σύντομη κλίμακα συνήθως δείχνει ότι τα ερωτήματα είναι σχεδόν παραφράσεις το ένα του άλλου, κάτι που ενισχύει τη συνέπεια εις βάρος της κάλυψης του κατασκευάσματος. Μια κλίμακα δέκα ερωτημάτων που ρωτούν όλα «είστε οργανωμένος/η;» με ελαφρώς διαφορετικά λόγια θα έχει εξαιρετική εσωτερική συνέπεια, αλλά θα αποτυπώνει μια στενή όψη της ευσυνειδησίας.
Τι σημαίνει για τη δική σας βαθμολογία
Η αξιοπιστία καθορίζει άμεσα πόση εμπιστοσύνη αξίζει να αποδώσετε σε έναν μεμονωμένο αριθμό. Ένα τεστ με αξιοπιστία 0,85 έχει αρκετά μεγάλο σφάλμα μέτρησης ώστε μια διαφορά λίγων μονάδων μεταξύ δύο ατόμων, ή μεταξύ της σημερινής σας βαθμολογίας και εκείνης του προηγούμενου μήνα, να είναι πολύ πιθανότερο να οφείλεται σε τυχαία διακύμανση παρά να δείχνει πραγματική διαφορά.
Η πρακτική συνέπεια είναι η εξής: ένα καλό εργαλείο αναφέρει την αξιοπιστία του, ώστε να γνωρίζετε πόσο μεγάλο είναι το περιθώριο αβεβαιότητας γύρω από τη βαθμολογία σας. Η τεχνική έκφραση αυτής της αβεβαιότητας είναι το τυπικό σφάλμα μέτρησης, το οποίο μετατρέπει τον συντελεστή αξιοπιστίας σε ένα εύρος συν ή πλην γύρω από τη βαθμολογία.
Ένα εργαλείο που δεν αναφέρει κανένα στοιχείο αξιοπιστίας δεν είναι γι' αυτόν τον λόγο πιο ακριβές. Απλώς δεν σας λέει πόσο ανακριβές είναι.
Δοκιμάστε το
Άλλο είναι να διαβάζετε για τη μέτρηση και άλλο να βλέπετε τη δική σας βαθμολογία με την πηγή της, το δείγμα νόρμας και τα όριά της. Δωρεάν συμπλήρωση, χωρίς εγγραφή.
Συνεχίστε την ανάγνωση
- Τι είναι η ψυχομετρία;Ο κλάδος που εξετάζει αν μια ψυχολογική μέτρηση είναι αξιόπιστη και έγκυρη, και ο λόγος για τον οποίο δύο τεστ που θέτουν παρόμοιες ερωτήσεις μπορεί να διαφέρουν τεράστια ως προς την αξία των αποτελεσμάτων τους.
- Τι είναι η εγκυρότητα στα ψυχολογικά τεστ;Η εγκυρότητα δεν είναι ιδιότητα που έχει ένα τεστ. Είναι ένα επιχείρημα για το κατά πόσον μπορεί να υποστηριχθεί μια συγκεκριμένη ερμηνεία μιας συγκεκριμένης βαθμολογίας, για έναν συγκεκριμένο σκοπό, και πρέπει να τεκμηριώνεται εκ νέου για κάθε νέα χρήση.
- Τι είναι η εγκυρότητα κατασκευάσματος;Το δυσκολότερο ερώτημα στη μέτρηση: αν αυτό που μετράτε υπάρχει όπως το έχετε ορίσει και αν το εργαλείο σας το μετρά πράγματι, αντί να μετρά κάτι συναφές.
- Συγκλίνουσα και διακρίνουσα εγκυρότηταΔύο συμμετρικές απαιτήσεις: μια μέτρηση πρέπει να συμφωνεί με όσα αναμένεται να συμφωνεί και να παραμένει διακριτή από όσα ισχυρίζεται ότι δεν είναι. Τα περισσότερα ανεπαρκή εργαλεία αποτυγχάνουν στη δεύτερη.
- Τι είναι ο συντελεστής άλφα του Cronbach και τι δεν είναιΤο στατιστικό μέτρο που αναφέρεται συχνότερα στα ψυχολογικά τεστ και παρερμηνεύεται περισσότερο. Το άλφα δεν δείχνει ότι μια κλίμακα μετρά μία μόνο διάσταση, ενώ μια υψηλή τιμή είναι συχνά σύμπτωμα παρά προτέρημα.
- Τυπικό σφάλμα μέτρησης: πόσο μπορεί να αποκλίνει η βαθμολογία σαςΚάθε βαθμολογία έχει ένα περιθώριο σφάλματος και, για τα περισσότερα ψυχολογικά τεστ, αυτό είναι μεγαλύτερο από όσο υποθέτουν οι περισσότεροι. Αυτός ο αριθμός σάς δείχνει πότε μια διαφορά είναι πραγματική και πότε οφείλεται σε τυχαία διακύμανση.
- Νόρμες και εκατοστημόρια: με τι συγκρίνεται η βαθμολογία σαςΜια ακατέργαστη βαθμολογία δεν μπορεί να ερμηνευτεί από μόνη της. Αποκτά νόημα μόνο σε σχέση με μια ομάδα αναφοράς, και το ποια ομάδα χρησιμοποιήθηκε είναι ένα από τα πιο καθοριστικά αλλά λιγότερο γνωστά στοιχεία για κάθε τεστ.
- Πώς κατασκευάζεται στην πράξη ένα ψυχομετρικό τεστΑπό τον ορισμό του κατασκευάσματος έως τη δημοσίευση των νορμών, η διαδικασία διαρκεί χρόνια και απορρίπτει το μεγαλύτερο μέρος όσων εξετάζονται στην πορεία. Αν γνωρίζετε τα βήματα, γίνεται σαφές ποια παρέλειψε ένα σύντομο διαδικτυακό κουίζ.
- Τι σημαίνει όταν ένα τεστ χαρακτηρίζεται έγκυρο;Ο όρος δεν υπόκειται σε ρύθμιση και χρησιμοποιείται ελεύθερα από προϊόντα που δεν έχουν κάνει τίποτα από όσα απαιτούνται. Δείτε τι σημαίνει όταν έχει ουσιαστικό περιεχόμενο και ποιες τέσσερις ερωτήσεις διακρίνουν τις δύο περιπτώσεις.
- Γιατί τα περισσότερα διαδικτυακά τεστ προσωπικότητας δεν είναι αξιόπισταΌχι επειδή είναι ανέντιμοι, αλλά επειδή τα βήματα που καθιστούν μια μέτρηση αξιόπιστη είναι αόρατα, δαπανηρά και εύκολο να παραλειφθούν. Και η παράλειψή τους δεν αλλάζει καθόλου την εμφάνιση του αποτελέσματος.
- Τι μπορεί και τι δεν μπορεί να μετρήσει η αυτοαναφοράΤα ερωτηματολόγια σάς ζητούν να παρατηρήσετε τον εαυτό σας, κάτι που λειτουργεί καλύτερα για ορισμένα πράγματα απ' ό,τι για άλλα. Αν γνωρίζετε πού υπερέχει αυτή η μέθοδος και πού αποτυγχάνει, διαβάζετε διαφορετικά κάθε αποτέλεσμα.
- Τι σημαίνει όταν ένα τεστ προβλέπει κάτιΜια συσχέτιση 0,30 είναι ισχυρό εύρημα στην έρευνα για την προσωπικότητα και ανεπαρκής βάση για μια απόφαση σχετικά με ένα άτομο. Και οι δύο διαπιστώσεις είναι αληθείς, και το χάσμα μεταξύ τους ευθύνεται για τις περισσότερες περιπτώσεις εσφαλμένης χρήσης των αποτελεσμάτων των τεστ.
- Ο προσυμπτωματικός έλεγχος δεν είναι διάγνωσηΈνα ερωτηματολόγιο διαλογής σχεδιάζεται ώστε να εντοπίζει όσο το δυνατόν περισσότερες πιθανές περιπτώσεις, αποδεχόμενο ένα υψηλό ποσοστό ψευδώς θετικών αποτελεσμάτων ως τίμημα. Η ερμηνεία μιας βαθμολογίας διαλογής ως διάγνωσης αντιστρέφει τον σκοπό για τον οποίο σχεδιάστηκε.