Bài trắc nghiệm được gọi là đã được xác nhận độ hiệu lực có nghĩa là gì?

"Được xác nhận khoa học" không phải là một thuật ngữ được bảo hộ. Không ai cấp chứng nhận cho nó, không cơ quan nào kiểm toán nó, và nó xuất hiện trên các sản phẩm mà toàn bộ cơ sở bằng chứng chỉ là có rất nhiều người đã làm bài trắc nghiệm đó. Điều đáng biết là nó có nghĩa gì khi được sử dụng đúng cách.

Phiên bản ngắn gọn

Một công cụ đã được xác nhận có một hồ sơ công bố cho thấy nó đo lường điều gì, với độ chính xác ra sao, trên những nhóm dân số nào, và điểm số của nó có thể được sử dụng hợp pháp cho mục đích gì. Xác nhận không phải là một chứng chỉ. Đó là một tập hợp bằng chứng, thường được tích lũy qua nhiều năm, thường bao gồm cả những phát hiện giới hạn việc sử dụng công cụ đó chứ không phải tô vẽ cho nó.

Sự hiện diện của những hạn chế được ghi nhận là một trong những tín hiệu tốt hơn. Tài liệu xác nhận đích thực đầy rẫy những điều này: thang đo này hoạt động kém ở thanh thiếu niên, khía cạnh kia không được tái lập, ngưỡng cắt phụ thuộc vào nhóm dân số. Một sản phẩm chỉ báo cáo những điểm mạnh thì không phải đã công bố xác nhận của mình; nó đã công bố hoạt động tiếp thị của mình.

Bốn câu hỏi mang lại giá trị thực

Công bố gốc là gì? Một công cụ đã được xác nhận có một bài báo gốc trên một tạp chí được bình duyệt, với tên tác giả, năm xuất bản và thường có mã DOI. Bài báo đó báo cáo cách các câu hỏi được xây dựng và các đặc tính đo lường tâm lý ban đầu là gì. Nếu không ai có thể nêu tên bài báo đó, thì không có xác nhận nào để bàn tới.

Cấu trúc có được xác nhận bởi người khác không? Nhóm phát triển sẽ tìm lại được đúng cấu trúc mà họ đã thiết kế. Điều quan trọng là liệu một nhóm độc lập, với dữ liệu độc lập, có tìm ra điều tương tự hay không. Đây là câu hỏi mang lại nhiều thông tin nhất mà bạn có thể đặt ra, và cũng là câu hỏi thường bị bỏ ngỏ nhất.

Các chuẩn được xây dựng trên nhóm dân số nào, và vào thời điểm nào? Điểm số là một vị trí trong một phân bố tham chiếu. Một công cụ báo cáo bách phân vị mà không nêu rõ nó tham chiếu đến nhóm dân số nào thì đã cho bạn một con số không có mẫu số.

Nó mang lại thêm điều gì? Độ hiệu lực gia tăng so với một công cụ đo lường đã được thiết lập. Rất nhiều cấu trúc mang thương hiệu thất bại ở điểm này, tương quan quá cao với một đặc điểm đã có sẵn đến mức chúng không giải thích thêm được phương sai nào trong bất cứ điều gì. Đây là một kết quả bình thường của sự xem xét khoa học, và nó vô hình trừ khi ai đó thực sự kiểm định.

Nơi việc dịch thuật làm phức tạp thêm vấn đề

Một công cụ được xác nhận bằng tiếng Anh không vì thế mà được xác nhận bằng tiếng Đức. Việc chuyển thể liên văn hóa đúng cách đòi hỏi dịch xuôi và dịch ngược, đánh giá của chuyên gia, phỏng vấn nhận thức, và sau đó là một nghiên cứu đo lường tâm lý mới trong ngôn ngữ mới để kiểm tra xem cấu trúc nhân tố có được giữ vững hay không và liệu từng câu hỏi có hoạt động tương đương giữa các nhóm hay không.

Những công cụ bỏ qua bước này rất phổ biến. Một bảng câu hỏi có xác nhận gốc hoàn hảo vẫn có thể hoạt động khá khác biệt trong một ngôn ngữ mà một câu hỏi then chốt mang hàm ý khác, và không có cách nào biết được điều này nếu không có nghiên cứu. Khi một bài trắc nghiệm được cung cấp bằng mười ngôn ngữ, câu hỏi hữu ích là liệu nó đã được xác nhận bằng mười ngôn ngữ hay chỉ được xác nhận bằng một ngôn ngữ rồi dịch sang chín ngôn ngữ còn lại.

Điều mà việc xác nhận không mang lại

Nó không làm cho một điểm số trở nên chắc chắn. Một công cụ đã được xác nhận vẫn mang sai số đo lường, vẫn mô tả một quy luật ở cấp độ quần thể chứ không phải số phận của một cá nhân, và vẫn chỉ đo lường những gì mà các câu hỏi của nó chạm tới.

Điều mà việc xác nhận mang lại là những giới hạn có thể biết được. Bạn có thể tìm hiểu có bao nhiêu sai số, trên nhóm dân số nào, cho mục đích nào. Đó là một tuyên bố khiêm tốn hơn nhiều so với "bài trắc nghiệm này tiết lộ con người thật của bạn", và đó là tuyên bố duy nhất đứng vững được.

Nếu bạn muốn xem tài liệu trông như thế nào khi nó thực sự tồn tại, mỗi bài trắc nghiệm trong danh mục NOESIS đều nêu rõ tên công cụ mà nó triển khai, tác giả và năm xuất bản, phương pháp tính điểm, và bằng chứng đằng sau nó, kể cả những nơi bằng chứng đó còn gây tranh cãi.