Độ tin cậy trong bài trắc nghiệm tâm lý là gì?
Độ tin cậy là tính nhất quán của phép đo, không phải là tính đúng đắn. Một bài trắc nghiệm có thể có độ tin cậy rất cao nhưng vẫn đo sai thứ cần đo, đó là lý do vì sao đây là câu hỏi được đặt ra đầu tiên và không bao giờ là câu hỏi cuối cùng.
Độ tin cậy là mức độ mà một phép đo có thể lặp lại được thay vì chỉ là nhiễu. Nếu bạn cân mình ba lần trong một phút và nhận được các kết quả 71, 78 và 66 ki-lô-gam, chiếc cân đó sẽ không đáng tin cậy, và bạn sẽ không có cách nào biết được cân nặng thực sự của mình từ đó. Đo lường tâm lý gặp phải vấn đề tương tự nhưng với thiết bị kém chính xác hơn nhiều.
Điều quan trọng cần hiểu về độ tin cậy là nó không khẳng định điều gì. Một chiếc cân phòng tắm luôn cho kết quả nặng hơn tám ki-lô-gam là hoàn toàn đáng tin cậy và cũng hoàn toàn sai. Độ tin cậy nói về tính nhất quán; còn việc con số đó có mang đúng ý nghĩa hay không là một câu hỏi khác, gọi là độ hiệu lực. Độ tin cậy là điều kiện cần cho độ hiệu lực, nhưng còn lâu mới là điều kiện đủ.
Các hình thức của độ tin cậy
Tính nhất quán nội tại đặt câu hỏi liệu các câu hỏi trong một thang đo có phù hợp với nhau hay không. Nếu mười câu hỏi đều nhằm đo cùng một đặc điểm tiềm ẩn, thì những người trả lời cao ở một câu nên có xu hướng trả lời cao ở các câu còn lại. Điều này thường được báo cáo dưới dạng hệ số alpha của Cronbach, hoặc tốt hơn là omega của McDonald.
Độ tin cậy kiểm tra lại (test-retest) đặt câu hỏi liệu cùng một người có đạt điểm số tương tự trong hai lần đo hay không. Đây là hình thức quan trọng nhất đối với các đặc điểm, vốn theo định nghĩa phải ổn định. Đây cũng là hình thức thường bị bỏ qua nhất khi báo cáo, vì nó đòi hỏi phải tìm lại đúng những người tham gia sau vài tuần.
Độ tin cậy giữa các giám định viên áp dụng khi con người là người chấm điểm cho công cụ đo, chẳng hạn như phỏng vấn lâm sàng, kỹ thuật phóng chiếu, quan sát hành vi. Nó đặt câu hỏi liệu hai giám định viên được đào tạo, khi xem xét cùng một tài liệu, có đưa ra cùng một kết luận hay không.
Độ tin cậy các phiên bản song song đặt câu hỏi liệu hai phiên bản khác nhau của cùng một bài trắc nghiệm, được xây dựng để tương đương nhau, có cho ra cùng một điểm số hay không. Điều này quan trọng ở bất cứ nơi nào bài trắc nghiệm được thực hiện nhiều hơn một lần và việc lộ câu hỏi là một mối lo ngại.
Đọc hiểu các con số
Hệ số tin cậy dao động từ 0 đến 1. Các quy ước là tương đối và thường bị hiểu sai, nhưng đại khái là: trên 0,90 là mức bắt buộc khi điểm số ảnh hưởng đến cuộc sống của một cá nhân, từ 0,80 đến 0,90 là mức tốt cho hầu hết các ứng dụng thực tế, từ 0,70 đến 0,80 là chấp nhận được cho nghiên cứu và cho so sánh giữa các nhóm, và dưới 0,70 nghĩa là điểm số chứa nhiều nhiễu hơn mức mà hầu hết các kết luận có thể chịu đựng được.
Có hai điều cần lưu ý về các ngưỡng này. Thứ nhất, đây là các quy ước, không phải quy luật; mức chấp nhận được hoàn toàn phụ thuộc vào mục đích sử dụng của điểm số. Thứ hai, hệ số alpha rất cao ở một thang đo ngắn thường cho thấy các câu hỏi gần như diễn đạt lại lẫn nhau, điều này mua được tính nhất quán bằng cái giá của việc bao quát cấu trúc. Một thang đo mười câu hỏi mà tất cả đều hỏi "bạn có ngăn nắp không?" theo những cách diễn đạt hơi khác nhau sẽ có tính nhất quán nội tại tuyệt vời nhưng lại phản ánh tính tận tâm một cách rất hạn hẹp.
Ý nghĩa đối với điểm số của chính bạn
Độ tin cậy chuyển hóa trực tiếp thành mức độ tin tưởng mà một con số đơn lẻ xứng đáng nhận được. Một bài trắc nghiệm với độ tin cậy 0,85 mang sai số đo lường đủ lớn để một sự khác biệt vài điểm giữa hai người, hoặc giữa điểm số của bạn hôm nay và điểm số của bạn tháng trước, rất có thể chỉ là nhiễu chứ không phải tín hiệu thực sự.
Đây là hệ quả thực tiễn: một công cụ tốt sẽ báo cáo độ tin cậy của nó để bạn biết được khoảng bất định xung quanh điểm số của mình rộng đến đâu. Cách diễn đạt kỹ thuật của sự bất định đó là sai số chuẩn của phép đo, chuyển hệ số tin cậy thành một khoảng cộng trừ xung quanh điểm số.
Một công cụ không báo cáo bất kỳ chỉ số tin cậy nào không vì thế mà trở nên chính xác hơn. Nó chỉ đơn giản là từ chối cho bạn biết nó thiếu chính xác đến mức nào.
Thử nghiệm thực tế
Đọc về đo lường là một chuyện. Nhìn thấy điểm số của chính bạn được báo cáo cùng với nguồn gốc, mẫu chuẩn và giới hạn của nó lại là chuyện khác. Miễn phí khi làm, không cần đăng ký.
Tiếp tục đọc
- Trắc nghiệm tâm lý là gì?Ngành học nghiên cứu xem một phép đo tâm lý có tốt hay không, và cũng là lý do vì sao hai bài trắc nghiệm hỏi những câu tương tự nhau lại có thể khác nhau rất lớn về giá trị của kết quả mà chúng đem lại.
- Độ hiệu lực trong trắc nghiệm tâm lý là gì?Độ hiệu lực không phải là một thuộc tính mà một bài trắc nghiệm sở hữu. Đó là một luận điểm về việc liệu một cách diễn giải cụ thể của một điểm số cụ thể, cho một mục đích cụ thể, có đứng vững hay không, và luận điểm đó phải được xây dựng lại cho mỗi lần sử dụng mới.
- Độ hiệu lực cấu trúc là gì?Câu hỏi khó nhất trong đo lường: liệu thứ mà bạn đang đo có tồn tại như bạn đã định nghĩa nó hay không, và liệu công cụ của bạn có tiếp cận được đúng thứ đó chứ không phải một thứ khác gần giống nó.
- Độ hiệu lực hội tụ và độ hiệu lực phân biệtHai yêu cầu đối xứng với nhau: một phép đo phải tương đồng với những gì nó cần tương đồng, và phải tách biệt rõ với những gì nó tuyên bố không phải là. Hầu hết các công cụ yếu kém đều thất bại ở yêu cầu thứ hai.
- Alpha của Cronbach là gì, và không phải là gìChỉ số được báo cáo nhiều nhất trong trắc nghiệm tâm lý, và cũng là chỉ số bị hiểu sai nhiều nhất. Alpha không cho bạn biết một thang đo là đơn chiều, và một giá trị cao thường là dấu hiệu của vấn đề hơn là một ưu điểm.
- Sai số chuẩn của đo lường: điểm số của bạn có thể lệch bao nhiêuMỗi điểm số đều mang một biên độ sai số, và với hầu hết các bài trắc nghiệm tâm lý, biên độ này rộng hơn nhiều so với những gì người ta thường nghĩ. Đây là con số cho bạn biết khi nào một sự khác biệt là thực sự và khi nào chỉ là nhiễu.
- Chuẩn và bách phân vị: điểm số của bạn được so sánh với gìMột điểm thô không thể tự diễn giải được. Nó chỉ có ý nghĩa khi được đối chiếu với một nhóm tham chiếu, và nhóm nào đã được sử dụng là một trong những sự thật có tác động lớn nhất và ít được công khai nhất về bất kỳ bài trắc nghiệm nào.
- Cách một bài trắc nghiệm tâm lý thực sự được xây dựngTừ định nghĩa cấu trúc đến các chuẩn được công bố, quá trình này kéo dài nhiều năm và loại bỏ hầu hết những gì đưa vào nó. Biết được các bước này giúp bạn dễ dàng nhận ra bước nào đã bị một bài trắc nghiệm nhanh trên mạng bỏ qua.
- Bài trắc nghiệm được gọi là đã được xác nhận độ hiệu lực có nghĩa là gì?Từ này không được quản lý và được sử dụng tự do bởi các sản phẩm chưa từng làm bất kỳ công việc nào cần thiết. Đây là ý nghĩa của nó khi nó thực sự có ý nghĩa, và bốn câu hỏi giúp phân biệt hai trường hợp đó.
- Vì sao hầu hết các bài trắc nghiệm tính cách trên internet không đáng tin cậyKhông phải vì họ không trung thực, mà vì các bước làm cho một phép đo trở nên đáng tin cậy là vô hình, tốn kém và dễ bị bỏ qua, và việc bỏ qua chúng không làm thay đổi gì về vẻ ngoài của kết quả.
- Tự báo cáo có thể đo lường điều gì và không thể đo lường điều gìCác bảng câu hỏi yêu cầu bạn trở thành người quan sát chính mình, và cách này hiệu quả hơn với một số điều so với những điều khác. Biết được phương pháp này mạnh ở đâu và yếu ở đâu sẽ thay đổi cách bạn đọc bất kỳ kết quả nào.
- Việc một bài trắc nghiệm dự đoán được điều gì đó nghĩa là gìMột hệ số tương quan 0,30 là một phát hiện mạnh trong nghiên cứu nhân cách nhưng lại là một cơ sở yếu để ra quyết định về một cá nhân cụ thể. Cả hai nhận định đều đúng, và khoảng cách giữa chúng chính là nguyên nhân của hầu hết các trường hợp sử dụng sai kết quả bài trắc nghiệm.
- Sàng lọc không phải là chẩn đoánMột bảng câu hỏi sàng lọc được thiết kế để phát hiện càng nhiều trường hợp có thể càng tốt, chấp nhận một tỷ lệ dương tính giả cao như một cái giá phải trả. Đọc một điểm số sàng lọc như một chẩn đoán là đảo ngược mục đích ban đầu mà nó được thiết kế để phục vụ.