Apakah maksudnya apabila sesuatu ujian dikatakan telah disahkan?
Perkataan ini tidak dikawal selia dan digunakan sesuka hati oleh produk yang tidak melakukan sebarang usaha tersebut. Berikut ialah maksudnya apabila ia benar-benar bermakna, serta empat soalan yang membezakan kedua-dua keadaan itu.
"Disahkan secara saintifik" bukanlah istilah yang dilindungi. Tiada sesiapa yang memperakuinya, tiada badan yang mengauditnya, dan istilah ini muncul pada produk yang seluruh asas buktinya hanyalah bahawa ramai orang telah mengambilnya. Anda wajar mengetahui maksudnya apabila istilah ini digunakan dengan betul.
Versi ringkas
Instrumen yang telah disahkan mempunyai rekod yang diterbitkan yang menunjukkan apa yang diukurnya, setepat mana, dalam populasi mana, dan untuk tujuan apa skornya boleh digunakan secara sah. Pengesahan bukanlah sijil. Ia merupakan himpunan bukti, lazimnya dikumpulkan selama bertahun-tahun, dan lazimnya merangkumi dapatan yang mengehadkan penggunaan instrumen itu dan bukannya memujinya.
Kewujudan batasan yang didokumentasikan merupakan salah satu petanda yang lebih baik. Literatur pengesahan yang tulen penuh dengan batasan sebegini: skala ini berprestasi lemah dalam kalangan remaja, faset itu tidak dapat direplikasi, titik potong bergantung pada populasi. Produk yang hanya melaporkan kekuatan-kekuatan belum menerbitkan pengesahannya; ia hanya menerbitkan bahan pemasarannya.
Empat soalan yang menjalankan tugasnya
Apakah penerbitan sumbernya? Instrumen yang telah disahkan mempunyai makalah asal dalam jurnal yang disemak rakan sebidang, dengan pengarang, tahun dan lazimnya DOI. Makalah itu melaporkan bagaimana item dibangunkan dan apakah sifat psikometrik awalnya. Jika tiada sesiapa yang dapat menamakan makalah tersebut, tiada pengesahan untuk dibincangkan.
Adakah strukturnya disahkan oleh pihak lain? Pasukan pembangun akan memperoleh semula struktur yang mereka reka. Yang penting ialah sama ada kumpulan bebas, dengan data bebas, menemui perkara yang sama. Inilah soalan paling bermaklumat yang boleh anda tanyakan, dan soalan yang paling kerap dibiarkan tidak berjawab.
Pada populasi mana norma dibina, dan bila? Skor ialah kedudukan dalam taburan rujukan. Instrumen yang melaporkan persentil tanpa menyatakan populasi yang dirujuknya telah memberi anda nombor tanpa penyebut.
Apakah nilai tambahnya? Kesahan inkremental berbanding ukuran yang sudah mantap. Banyak konstruk berjenama gagal di sini, berkorelasi begitu tinggi dengan sifat sedia ada sehingga tidak menjelaskan sebarang varians tambahan dalam apa jua perkara. Ini merupakan hasil biasa penelitian saintifik, dan ia tidak kelihatan melainkan seseorang menjalankan ujian tersebut.
Di mana terjemahan merumitkannya
Instrumen yang disahkan dalam bahasa Inggeris tidak dengan sendirinya disahkan dalam bahasa Jerman. Adaptasi silang budaya yang betul memerlukan terjemahan ke hadapan dan terjemahan balik, semakan pakar, temu bual kognitif, dan kemudian kajian psikometrik baharu dalam bahasa baharu itu untuk menguji sama ada struktur faktor kekal dan sama ada item individu berfungsi secara setara merentas kumpulan.
Instrumen yang melangkau proses ini adalah lazim. Soal selidik yang pengesahan asalnya sempurna boleh berkelakuan agak berbeza dalam bahasa di mana item utama membawa konotasi yang berlainan, dan tiada cara untuk mengetahuinya tanpa kajian tersebut. Apabila sesuatu ujian ditawarkan dalam sepuluh bahasa, soalan yang berguna ialah sama ada ia disahkan dalam sepuluh bahasa atau disahkan dalam satu bahasa dan diterjemahkan ke dalam sembilan bahasa.
Apa yang tidak diberikan oleh pengesahan
Pengesahan tidak menjadikan sesuatu skor itu pasti. Instrumen yang telah disahkan masih membawa ralat pengukuran, masih menggambarkan keteraturan pada peringkat populasi dan bukannya takdir individu, dan masih hanya mengukur apa yang dapat dicapai oleh itemnya.
Apa yang diberikan oleh pengesahan ialah batasan yang dapat diketahui. Anda boleh mengetahui berapa banyak ralat, dalam populasi mana, untuk tujuan apa. Itu dakwaan yang lebih kecil berbanding "ujian ini mendedahkan siapa diri anda yang sebenar", dan itulah satu-satunya dakwaan yang dapat dipertahankan.
Jika anda ingin melihat rupa dokumentasi apabila ia wujud, setiap ujian dalam katalog ujian NOESIS menamakan instrumen yang dilaksanakannya, pengarang dan tahunnya, kaedah pemarkahannya, dan bukti yang menyokongnya, termasuk di mana bukti itu dipertikaikan.
Uji sendiri
Membaca tentang pengukuran adalah satu perkara. Melihat skor anda sendiri dilaporkan bersama sumbernya, sampel normanya dan batasannya adalah perkara lain. Percuma, tanpa perlu mendaftar.
Teruskan membaca
- Apakah itu psikometrik?Disiplin yang menentukan sama ada sesuatu pengukuran psikologi itu baik atau tidak, dan sebab dua ujian yang mengemukakan soalan serupa boleh berbeza dengan ketara dari segi nilai keputusannya.
- Apakah itu kebolehpercayaan dalam ujian psikologi?Kebolehpercayaan ialah ketekalan pengukuran, bukan ketepatan. Sesuatu ujian boleh mempunyai kebolehpercayaan yang tinggi tetapi masih mengukur perkara yang salah; itulah sebabnya ia merupakan soalan pertama yang ditanya dan tidak pernah yang terakhir.
- Apakah itu kesahan dalam ujian psikologi?Kesahan bukanlah sifat yang dimiliki oleh sesuatu ujian. Ia ialah hujah tentang sama ada tafsiran tertentu terhadap skor tertentu, bagi tujuan tertentu, boleh dipertahankan; dan ia perlu dibina semula bagi setiap kegunaan baharu.
- Apakah itu kesahan konstruk?Soalan paling sukar dalam pengukuran: sama ada perkara yang anda ukur benar-benar wujud seperti yang anda takrifkan, dan sama ada instrumen anda mencapainya dan bukan sesuatu yang berdekatan dengannya.
- Kesahan konvergen dan diskriminanDua keperluan yang saling bercermin: sesuatu ukuran mesti selari dengan apa yang sepatutnya selari dengannya, dan mesti kekal berbeza daripada apa yang didakwa bukan dirinya. Kebanyakan instrumen yang lemah gagal memenuhi keperluan yang kedua.
- Apakah itu alfa Cronbach, dan apakah yang bukanStatistik yang paling kerap dilaporkan dalam ujian psikologi, dan yang paling kerap disalah tafsir. Alfa tidak memberitahu anda bahawa sesuatu skala itu unidimensi, dan nilai yang tinggi sering kali merupakan simptom dan bukannya kelebihan.
- Ralat piawai pengukuran: sejauh mana skor anda mungkin tersasarSetiap skor membawa margin ralat, dan bagi kebanyakan ujian psikologi, margin ini lebih luas daripada yang disangka oleh orang ramai. Inilah nombor yang memberitahu anda bila sesuatu perbezaan itu benar dan bila ia hanya hingar.
- Norma dan persentil: apakah perbandingan bagi skor andaSkor mentah tidak dapat ditafsirkan dengan sendirinya. Ia hanya menjadi bermakna apabila dibandingkan dengan kumpulan rujukan, dan kumpulan yang digunakan merupakan salah satu fakta paling penting tetapi paling jarang dinyatakan tentang mana-mana ujian.
- Bagaimana ujian psikometrik sebenarnya dibinaDaripada definisi konstruk hingga norma yang diterbitkan, urutan ini mengambil masa bertahun-tahun dan membuang sebahagian besar daripada apa yang dimasukkan ke dalamnya. Dengan mengetahui langkah-langkahnya, jelaslah langkah mana yang dilangkau oleh kuiz dalam talian yang ringkas.
- Mengapa kebanyakan ujian personaliti di internet tidak boleh dipercayaiBukan kerana mereka tidak jujur, tetapi kerana langkah-langkah yang menjadikan sesuatu pengukuran boleh dipercayai tidak kelihatan, mahal dan mudah diabaikan; dan mengabaikannya tidak mengubah apa-apa tentang rupa keputusan tersebut.
- Apa yang boleh dan tidak boleh diukur oleh laporan kendiriSoal selidik meminta anda menjadi pemerhati diri sendiri, dan cara ini lebih berkesan untuk sesetengah perkara berbanding yang lain. Mengetahui di mana kaedah ini kuat dan di mana ia gagal akan mengubah cara anda membaca sebarang keputusan.
- Apakah maksudnya apabila sesuatu ujian meramalkan sesuatuKorelasi 0.30 ialah dapatan yang kukuh dalam penyelidikan personaliti tetapi asas yang lemah untuk membuat keputusan tentang seseorang individu. Kedua-dua kenyataan ini benar, dan jurang antara keduanya menjadi punca kebanyakan penyalahgunaan keputusan ujian.
- Saringan bukan diagnosisSoal selidik saringan dibina untuk mengesan sebanyak mungkin kes yang berkemungkinan, dengan menerima kadar positif palsu yang tinggi sebagai harganya. Membaca skor saringan sebagai diagnosis adalah bertentangan dengan tujuan asal reka bentuknya.