Yakınsak ve ayırt edici geçerlik
Birbirinin aynası olan iki gereklilik: bir ölçüm, aynı fikirde olması gereken şeylerle uyum içinde olmalı, ve olmadığını iddia ettiği şeylerden ayrı durmalıdır. Zayıf araçların çoğu ikincisinde başarısız olur.
Yakınsak ve ayırt edici geçerlik, tek bir gerekliliğin iki yarısıdır. Bir ölçüm, teorik olarak ilişkili olması gereken şeylerle korelasyon göstermeli ve ayrı olması gereken şeylerle çok yüksek korelasyon göstermemelidir. Birini karşılayıp diğerini karşılamamak kısmi bir başarı değildir; genellikle yapının söylediği şey olmadığının bir işaretidir.
Yakınsak geçerlik
Yakınsak kanıt, bir ölçümün aynı şeyin diğer göstergeleriyle uyumlu olduğunu gösterir. Yeni bir kaygı ölçeği, yerleşik kaygı ölçekleriyle, klinisyen değerlendirmeleriyle ve ideal olarak fizyolojik ölçümler veya gözlenen kaçınma davranışı gibi başka bir anket olmayan bir şeyle önemli ölçüde ilişkili olmalıdır.
Buradaki korelasyonların genellikle 0,50'nin üzerinde, karşılaştırma ölçümü aynı yapı için yerleşik bir araç olduğunda ise sıklıkla 0,70'in üzerinde olması beklenir. Bunun altında, ya yeni ölçek ya da karşılaştırma ölçümü başka bir şeyi ölçüyordur.
Burada bir tuzak vardır. Mevcut bir ölçekle 0,95 korelasyon bir zafer değildir; bu, yeni aracın yeniden paketlenmiş bir versiyon olduğu anlamına gelir ve dürüst soru, bunun neye katkı sağladığıdır. Yakınsak geçerlik bir alt sınırdır, maksimize edilmesi gereken bir hedef değildir.
Ayırt edici geçerlik
Ayırt edici kanıt, ölçümün farklı olduğunu iddia ettiği yapılardan ayrı kaldığını gösterir. İlginç başarısızlıklar burada yaşanır.
Bu örüntü literatürde tekrar tekrar görülür. Azim (grit), özdisiplin (conscientiousness) ile yaklaşık 0,84 korelasyon gösterir; bu, meta-analizin özdisiplin kontrol edildiğinde akademik tahmine neredeyse hiçbir şey katmadığını bulacağı kadar yakındır. Öz bildirime dayalı duygusal zeka, duygusal denge, dışadönüklük ve özdisiplinin birleşimiyle büyük ölçüde örtüşür. Karanlık Üçlü (Dark Triad) genelindeki paylaşılan varyans, HEXACO modelinden Dürüstlük-Alçakgönüllülük hesaba katıldığında büyük ölçüde kaybolur. Her durumda yapı yeni bir alan olarak sunulmuş ve mevcut bir haritanın yeniden adlandırılmış bir bölgesi olduğu ortaya çıkmıştır.
Ayırt edici geçerlik, aynı zamanda yöntem etkilerinin ortaya çıktığı yerdir. Bir çalışmadaki her öz bildirime dayalı yapı diğer her yapıyla 0,4 korelasyon gösteriyorsa, ortak faktör muhtemelen paylaşılan herhangi bir psikoloji değil, katılımcının yanıt tarzıdır.
Konuyu çözen test
Belirleyici prosedür artımlı (incremental) geçerliktir: önce yerleşik ölçümü bir regresyona dahil et, ardından yeni olanı ekle ve yeni olanın sonuçtaki varyansın herhangi bir ek kısmını açıklayıp açıklamadığına bak. Açıklamıyorsa, yapı teorik olarak yine de ilgi çekici olabilir, ancak araç, alanın zaten sahip olmadığı hiçbir şeyi ölçmüyordur.
Bu talep edici bir standarttır ve yayımlanmış çok sayıda ölçek bu teste hiçbir zaman tabi tutulmamıştır. Tabi tutulduklarında ise sonuç sıklıkla yukarıdaki gereksizlik bulgusudur. Bu bir skandal değildir; normal bir bilimsel budama işlemidir. Ancak bu, bir yapının popülerliğinin, testten geçip geçmeyeceği konusunda bilgi vermediği anlamına gelir.
Bir okuyucu için bunun değiştirdiği şey
Bir test birden fazla puan bildirdiğinde, işe yarar soru bu puanların gerçekten ayrı olup olmadığıdır. Birbirleriyle 0,8 korelasyon gösteren dört boyut, dört etiketli tek bir boyuttur ve bunlardan oluşturulan bir profil farklılaşmış görünecek ama neredeyse hiç bağımsız bilgi taşımayacaktır.
Ölçekler arası korelasyonlarını bildiren araçlar bunu kendin kontrol etmene izin verir. Dört çeyrekli bir tip sunup çeyreklerin birbiriyle nasıl ilişkili olduğunu hiçbir zaman göstermeyen araçlar bu kontrolü imkansız kılmıştır ki bu genellikle amacın ta kendisidir.
Sen de dene
Ölçüm hakkında okumak bir şey, kendi puanının kaynağıyla, norm örneklemiyle ve sınırlarıyla birlikte raporlandığını görmek başka bir şeydir. Katılmak ücretsiz, kayıt gerekmez.
Okumaya devam et
- Psikometri nedir?Bir psikolojik ölçümün iyi olup olmadığını belirleyen disiplin, ve benzer sorular soran iki testin sonuçlarının değeri açısından muazzam farklılık gösterebilmesinin nedeni.
- Psikolojik testte güvenirlik nedir?Güvenirlik, ölçümün tutarlılığıdır, doğruluğu değil. Bir test yüksek derecede güvenilir olabilir ve yine de yanlış şeyi ölçebilir, bu yüzden sorulan ilk soru budur ve asla son soru değildir.
- Psikolojik testte geçerlik nedir?Geçerlik, bir testin sahip olduğu bir özellik değildir. Belirli bir amaç için, belirli bir puanın belirli bir yorumunun savunulabilir olup olmadığına dair bir tartışmadır ve her yeni kullanım için yeniden inşa edilmesi gerekir.
- Yapı geçerliği nedir?Ölçümdeki en zor soru: tanımladığın şeyin var olup olmadığı, ve aracının ona mı yoksa yakın bir başka şeye mi ulaştığı.
- Cronbach alfa nedir ve ne değildirPsikolojik testlerde en çok bildirilen istatistik, ve en çok yanlış okunan. Alfa bir ölçeğin tek boyutlu olduğunu göstermez, ve yüksek bir değer genellikle bir erdemden çok bir belirtidir.
- Ölçüm standart hatası: puanının ne kadar sapmış olabileceğiHer puan bir hata payı taşır, ve çoğu psikolojik test için bu, insanların varsaydığından daha geniştir. Bu, bir farkın ne zaman gerçek, ne zaman gürültü olduğunu söyleyen sayıdır.
- Normlar ve yüzdelik dilimler: puanın neyle karşılaştırılıyorHam bir puan kendi başına yorumlanamaz. Ancak bir referans grubuna karşı anlamlı hale gelir, ve hangi grubun kullanıldığı, herhangi bir testle ilgili en sonuç doğurucu ve en az duyurulan gerçeklerden biridir.
- Bir psikometrik test gerçekte nasıl oluşturulurYapı tanımından yayımlanmış normlara kadar, bu süreç yıllar sürer ve içine giren şeylerin çoğunu eler. Adımları bilmek, hızlı bir çevrimiçi testin hangilerini atladığını açıkça gösterir.
- Bir testin geçerliği kanıtlanmış olarak adlandırılması ne anlama gelir?Bu kelime düzenlenmemiştir ve hiçbir çalışma yapmamış ürünler tarafından serbestçe kullanılır. İşte bir anlamı olduğunda ne anlama geldiği, ve iki durumu birbirinden ayıran dört soru.
- Çoğu internet kişilik testinin neden güvenilir olmadığıDürüst olmadıkları için değil, bir ölçümü güvenilir kılan adımlar görünmez, maliyetli ve atlanması kolay olduğu için, ve bu adımları atlamak sonucun görünüşünde hiçbir şeyi değiştirmez.
- Öz bildirimin ölçebildiği ve ölçemediği şeylerAnketler senden kendi kendinin gözlemcisi olmanı ister, bu bazı şeyler için diğerlerinden daha iyi işler. Yöntemin nerede güçlü, nerede yetersiz olduğunu bilmek, herhangi bir sonucu okuma şeklini değiştirir.
- Bir testin bir şeyi öngörmesi ne anlama gelir0,30'luk bir korelasyon, kişilik araştırmalarında güçlü bir bulgudur ama bir kişi hakkında karar vermek için zayıf bir temeldir. Her iki ifade de doğrudur ve aralarındaki boşluk, test sonuçlarının çoğu kötüye kullanımına neden olur.
- Tarama, tanı değildirBir tarama anketi, olası vakaları yakalayabildiği kadar yakalamak için tasarlanmıştır ve bunun karşılığında yüksek bir yanlış pozitiflik oranını kabul eder. Bir tarama puanını tanı olarak okumak, tasarlandığı amacı tersine çevirir.