Bir psikometrik test gerçekte nasıl oluşturulur
Yapı tanımından yayımlanmış normlara kadar, bu süreç yıllar sürer ve içine giren şeylerin çoğunu eler. Adımları bilmek, hızlı bir çevrimiçi testin hangilerini atladığını açıkça gösterir.
Yayımlanma aşamasına ulaşan bir psikometrik araç, genellikle beş altı yıllık bir çalışma sürecinden geçmiştir ve onun için yazılanların çoğu bir kenara atılmıştır. Bu sıralamayı bilmekte fayda var, çünkü sürecin her aşaması bir testin yetersiz olabileceği bir yola karşılık gelir.
1. Yapıyı tanımla
Herhangi bir madde yazılmadan önce, yapının neyin bunun dışında kaldığını söyleyecek kadar hassas bir şekilde belirtilmesi gerekir. Bu; bir tanım, boyutsal yapıya dair bir ifade (tek bir boyut mu yoksa birden fazla mı, birden fazlaysa bunların birbiriyle ilişkisi) ve ayırt edilmesi amaçlanan komşu yapılara dair açık bir açıklama anlamına gelir.
Bu aşamayı atlamak, çoğu gereksiz aracın kökenidir. Bir kavrama dair sezgisel bir anlayıştan inşa edilen bir ölçek, genellikle yerleşik bir özelliği yeni bir isim altında ölçmekle sonuçlanır.
2. Madde havuzu oluştur
Maddeler, sonunda kalacak sayının çok üzerinde taslak olarak yazılır; genellikle nihai sayının üç ila beş katı kadar. Bunlar kuramdan, mevcut araçlardan, tarif edilen deneyime sahip kişilerle yapılan görüşmelerden ve konu uzmanlarından gelir.
Bu aşamada havuz; içerik kapsamı (yapının tamamını mı kapsıyor yoksa tek bir yönde mi kümeleniyor?), okuma düzeyi, çift boyutlu ifadeler ve aslında başka bir şeyi sorgulayan maddeler açısından gözden geçirilir.
3. Pilot uygula ve ayıkla
Havuz ilk örnekleme gider. Analiz büyük ölçüde eleyicidir.
Neredeyse hiç varyans göstermeyen maddeler elenir; herkesin aynı şekilde cevapladığı bir soru kimseyi ayırt etmez. Toplam puanla zayıf korelasyon gösteren maddeler elenir. Birden fazla faktöre yüklenen maddeler elenir. Özellikle ilgisiz nedenlerle demografik gruplar arasında farklı davranan maddeler, yani farklı madde işlevselliği gösterenler elenir ve bu kontrol en sık atlanan kontrollerden biridir.
Geriye kalan genellikle yazılanın üçte biridir.
4. Yapıyı yeni bir örneklemde doğrula
Bu adım, ciddi araçları diğerlerinden ayıran adımdır. Geliştirme örneklemi üzerinde yapılan faktör analizi, tasarlanmış olan yapıyı geri getirecektir; maddeler bu yapıyı üretmek için seçildiğinden bu kaçınılmazdır. Asıl sınav, bağımsız bir örneklemde yapılan doğrulayıcı faktör analizidir.
Yayımlanmış birçok ölçek, amaçlanan yapısını yalnızca kendisini oluşturmak için kullanılan verilerde geri getirir. Başka biri yeni veri topladığında, faktörler ortaya çıkmaz. Bu başarısızlık o kadar yaygındır ki "yapı bağımsız bir örneklemde doğrulandı mı?" sorusu herhangi bir araç hakkında sorulabilecek en verimli sorulardan biridir.
5. Geçerlik kanıtı biriktir
Aynı yapının yerleşik ölçümleriyle korelasyonlar. Ayırt edilmesi gereken yapılarla korelasyonlar, ki bunların daha düşük olması gerekir. Önemli sonuçlarla ilişkiler. Zaten var olana kıyasla artımlı geçerlik. Yapıya uygun bir aralıkta test tekrar test kararlılığı.
Bu aşama sona ermez. Araç kullanımda olduğu sürece devam eder ve araçların yayımlanmasından yıllar sonra en çok yetersiz bulunduğu yer burasıdır.
6. Norm oluştur
Hedeflenen popülasyon için yeterince büyük ve temsil edici, özellik yaşa veya cinsiyete göre değişiyorsa katmanlara ayrılmış, yıl ve ülke açısından belgelenmiş bir referans örneklemi. Ardından periyodik olarak tekrarlanmalıdır, çünkü normlar zamanla değişir.
7. Başka bir yerde kullanılacaksa çevir
Çeviri dilbilimsel bir alıştırma değildir. Uygun uyarlama; ileri çeviri, bağımsız geri çeviri, uzman incelemesi, hedef dili konuşanlarla yapılan bilişsel görüşmeler ve ardından yapının geçerli olup olmadığını ve maddelerin eşdeğer işlev gösterip göstermediğini test etmek için yeni dilde taze bir psikometrik çalışma anlamına gelir. Bu çalışma yapılmadan çevrilen bir araç, orijinalindeki nitelikleri ne olursa olsun, o dilde test edilmemiş bir araçtır.
Bunun hızlı sınavlar için anlamı
Bir öğleden sonra yazılan bir test, ikinci adımı tamamlamış demektir. İnandırıcı görünen bir sonuç, bir yüzdelik dilim ve bir paragraflık açıklama üretebilir pekala. Atlanan adımlar ise, bütün bunların gerçekten bir anlam ifade edip etmediğini ortaya koyacak olan adımlardır.
Sen de dene
Ölçüm hakkında okumak bir şey, kendi puanının kaynağıyla, norm örneklemiyle ve sınırlarıyla birlikte raporlandığını görmek başka bir şeydir. Katılmak ücretsiz, kayıt gerekmez.
Okumaya devam et
- Psikometri nedir?Bir psikolojik ölçümün iyi olup olmadığını belirleyen disiplin, ve benzer sorular soran iki testin sonuçlarının değeri açısından muazzam farklılık gösterebilmesinin nedeni.
- Psikolojik testte güvenirlik nedir?Güvenirlik, ölçümün tutarlılığıdır, doğruluğu değil. Bir test yüksek derecede güvenilir olabilir ve yine de yanlış şeyi ölçebilir, bu yüzden sorulan ilk soru budur ve asla son soru değildir.
- Psikolojik testte geçerlik nedir?Geçerlik, bir testin sahip olduğu bir özellik değildir. Belirli bir amaç için, belirli bir puanın belirli bir yorumunun savunulabilir olup olmadığına dair bir tartışmadır ve her yeni kullanım için yeniden inşa edilmesi gerekir.
- Yapı geçerliği nedir?Ölçümdeki en zor soru: tanımladığın şeyin var olup olmadığı, ve aracının ona mı yoksa yakın bir başka şeye mi ulaştığı.
- Yakınsak ve ayırt edici geçerlikBirbirinin aynası olan iki gereklilik: bir ölçüm, aynı fikirde olması gereken şeylerle uyum içinde olmalı, ve olmadığını iddia ettiği şeylerden ayrı durmalıdır. Zayıf araçların çoğu ikincisinde başarısız olur.
- Cronbach alfa nedir ve ne değildirPsikolojik testlerde en çok bildirilen istatistik, ve en çok yanlış okunan. Alfa bir ölçeğin tek boyutlu olduğunu göstermez, ve yüksek bir değer genellikle bir erdemden çok bir belirtidir.
- Ölçüm standart hatası: puanının ne kadar sapmış olabileceğiHer puan bir hata payı taşır, ve çoğu psikolojik test için bu, insanların varsaydığından daha geniştir. Bu, bir farkın ne zaman gerçek, ne zaman gürültü olduğunu söyleyen sayıdır.
- Normlar ve yüzdelik dilimler: puanın neyle karşılaştırılıyorHam bir puan kendi başına yorumlanamaz. Ancak bir referans grubuna karşı anlamlı hale gelir, ve hangi grubun kullanıldığı, herhangi bir testle ilgili en sonuç doğurucu ve en az duyurulan gerçeklerden biridir.
- Bir testin geçerliği kanıtlanmış olarak adlandırılması ne anlama gelir?Bu kelime düzenlenmemiştir ve hiçbir çalışma yapmamış ürünler tarafından serbestçe kullanılır. İşte bir anlamı olduğunda ne anlama geldiği, ve iki durumu birbirinden ayıran dört soru.
- Çoğu internet kişilik testinin neden güvenilir olmadığıDürüst olmadıkları için değil, bir ölçümü güvenilir kılan adımlar görünmez, maliyetli ve atlanması kolay olduğu için, ve bu adımları atlamak sonucun görünüşünde hiçbir şeyi değiştirmez.
- Öz bildirimin ölçebildiği ve ölçemediği şeylerAnketler senden kendi kendinin gözlemcisi olmanı ister, bu bazı şeyler için diğerlerinden daha iyi işler. Yöntemin nerede güçlü, nerede yetersiz olduğunu bilmek, herhangi bir sonucu okuma şeklini değiştirir.
- Bir testin bir şeyi öngörmesi ne anlama gelir0,30'luk bir korelasyon, kişilik araştırmalarında güçlü bir bulgudur ama bir kişi hakkında karar vermek için zayıf bir temeldir. Her iki ifade de doğrudur ve aralarındaki boşluk, test sonuçlarının çoğu kötüye kullanımına neden olur.
- Tarama, tanı değildirBir tarama anketi, olası vakaları yakalayabildiği kadar yakalamak için tasarlanmıştır ve bunun karşılığında yüksek bir yanlış pozitiflik oranını kabul eder. Bir tarama puanını tanı olarak okumak, tasarlandığı amacı tersine çevirir.