پایایی در آزمونهای روانشناختی چیست؟
پایایی یعنی ثبات اندازهگیری، نه درستی آن. یک آزمون میتواند بسیار پایا باشد و باز هم چیز نادرستی را بسنجد؛ به همین دلیل پایایی نخستین پرسشی است که مطرح میشود، اما هرگز آخرین پرسش نیست.
پایایی میزانی است که یک اندازهگیری تکرارپذیر است و صرفاً نوفه (خطای تصادفی) نیست. اگر در یک دقیقه سه بار خودتان را وزن کنید و اعداد 71، 78 و 66 کیلوگرم را ببینید، ترازو ناپایا است و شما هیچ راهی برای دانستن وزن واقعیتان از روی آن ندارید. اندازهگیری روانشناختی با ابزاری بسیار کمدقتتر با همین مشکل روبهرو است.
مهمترین نکته دربارهٔ پایایی این است که چه چیزی را ادعا نمیکند. ترازوی حمامی که پیوسته هشت کیلوگرم بیشتر نشان میدهد، کاملاً پایا است و کاملاً نادرست. پایایی دربارهٔ ثبات و سازگاری است؛ اینکه عدد، معنای درست را برساند پرسشی جداگانه است که روایی نام دارد. پایایی برای روایی لازم است، اما بههیچوجه کافی نیست.
شکلهایی که پایایی به خود میگیرد
همسانی درونی میپرسد آیا گویههای یک مقیاس با یکدیگر همسو هستند یا نه. اگر قرار است ده پرسش همگی یک صفت زیربنایی واحد را بسنجند، کسانی که در یکی نمرهٔ بالا میگیرند باید در بقیه هم تمایل به نمرهٔ بالا داشته باشند. این شاخص معمولاً با آلفای کرونباخ یا، بهتر از آن، امگای مکدونالد گزارش میشود.
پایایی بازآزمون میپرسد آیا یک فرد در دو نوبت نمرههای مشابهی میگیرد یا نه. این شکل برای صفتها بیشترین اهمیت را دارد، زیرا صفتها طبق تعریف باید پایدار باشند. این همان شکلی است که بیشتر از همه گزارش نمیشود، چون لازم است همان شرکتکنندگان هفتهها بعد دوباره پیدا شوند.
پایایی بینارزیاب زمانی کاربرد دارد که انسانها ابزار را نمرهگذاری میکنند، مانند مصاحبههای بالینی، فنون فرافکن و مشاهدهٔ رفتاری. این شاخص میپرسد آیا دو ارزیاب آموزشدیده که به یک مطلب نگاه میکنند به نتیجهٔ یکسانی میرسند یا نه.
پایایی فرمهای موازی میپرسد آیا دو نسخهٔ متفاوت از یک آزمون که برای همارزی ساخته شدهاند، نمرههای یکسانی تولید میکنند یا نه. هر جا آزمونی بیش از یک بار اجرا شود و در معرض قرارگرفتن گویهها اهمیت داشته باشد، این شکل مهم است.
خواندن اعداد
ضرایب پایایی از 0 تا 1 هستند. قراردادهای مربوط به آنها تقریبی است و بسیار هم نادرست به کار میرود، اما بهطور کلی: مقادیر بالاتر از 0.90 در جایی لازم است که نمره بر زندگی یک فرد اثر میگذارد، 0.80 تا 0.90 برای بیشتر کاربردهای عملی مطلوب است، 0.70 تا 0.80 برای پژوهش و مقایسهٔ گروهها قابلقبول است و کمتر از 0.70 یعنی نمره نوفهای بیش از آن دارد که بیشتر نتیجهگیریها از آن جان سالم به در ببرند.
دربارهٔ این آستانهها دو احتیاط لازم است. نخست اینکه اینها قرارداد هستند، نه قانون؛ سطح قابلقبول کاملاً به کاربرد نمره بستگی دارد. دوم اینکه آلفای بسیار بالا در یک مقیاس کوتاه معمولاً نشان میدهد گویهها تقریباً بازنویسی یکدیگرند، و این سازگاری به بهای پوششدادن سازه به دست آمده است. مقیاسی با ده پرسش که همگی با واژههایی اندکی متفاوت میپرسند «آیا منظم هستید؟» همسانی درونی عالی خواهد داشت و برداشتی محدود از وظیفهشناسی.
معنای آن برای نمرهٔ خود شما
پایایی مستقیماً تعیین میکند یک عدد تنها چقدر اطمینانپذیر است. آزمونی با پایایی 0.85 خطای اندازهگیریای دارد که بهاندازهای بزرگ است که تفاوت چند نمرهای بین دو نفر، یا بین نمرهٔ امروز شما و نمرهٔ ماه گذشتهتان، به احتمال بسیار زیاد نوفه است و نه سیگنال.
پیامد عملی این است: ابزار خوب پایایی خود را گزارش میکند تا بدانید عدم قطعیت پیرامون نمرهٔ شما چقدر گسترده است. بیان فنی این عدم قطعیت خطای معیار اندازهگیری است که ضریب پایایی را به یک بازهٔ مثبت و منفی پیرامون نمره تبدیل میکند.
ابزاری که هیچ شاخص پایایی گزارش نمیکند، به این دلیل دقیقتر نیست. فقط از گفتن اینکه چقدر نادقیق است خودداری کرده است.
خودتان را بیازمایید
خواندن دربارهٔ سنجش یک چیز است و دیدن نمرهٔ خودتان همراه با منبع، نمونهٔ هنجار و محدودیتهایش چیز دیگری. شرکت در آزمون رایگان است و نیازی به ثبتنام نیست.
ادامه مطالعه
- روانسنجی چیست؟رشتهای که بررسی میکند یک اندازهگیری روانشناختی چقدر خوب است، و دلیل اینکه دو آزمون با پرسشهای مشابه میتوانند از نظر ارزش نتایجشان تفاوت بسیار زیادی داشته باشند.
- روایی در آزمونهای روانشناختی چیست؟روایی ویژگیِ یک آزمون نیست. روایی استدلالی است دربارهٔ اینکه آیا یک تفسیر مشخص از یک نمرهٔ مشخص، برای یک هدف مشخص، قابل دفاع است یا نه؛ و این استدلال برای هر کاربرد تازه باید از نو ساخته شود.
- روایی سازه چیست؟دشوارترین پرسش در اندازهگیری: اینکه آیا چیزی که اندازه میگیرید واقعاً به همان صورتی که تعریف کردهاید وجود دارد، و آیا ابزار شما به خود آن میرسد، نه به چیزی نزدیک به آن.
- روایی همگرا و تمایزیدو الزام آینهوار: یک سنجه باید با آنچه باید با آن همسو باشد همسو باشد، و از آنچه ادعا میکند نیست متمایز بماند. بیشتر ابزارهای ضعیف در مورد دوم شکست میخورند.
- آلفای کرونباخ چیست و چه چیزی نیستپرکاربردترین آماره در آزمونهای روانشناختی و در عین حال پرتکرارترین آمارهای که اشتباه تفسیر میشود. آلفا نشان نمیدهد که یک مقیاس تکبُعدی است، و مقدار بالای آن اغلب نشانهٔ مشکل است، نه حُسن.
- خطای استاندارد اندازهگیری: میزان خطای احتمالی نمره شماهر نمرهای با یک حاشیهٔ خطا همراه است و در بیشتر آزمونهای روانشناختی این حاشیه از آنچه افراد تصور میکنند وسیعتر است. این همان عددی است که به شما میگوید یک تفاوت واقعی است یا فقط نوفه.
- هنجارها و صدکها: نمرهٔ شما با چه چیزی مقایسه میشودنمره خام بهتنهایی قابل تفسیر نیست. این نمره تنها در مقایسه با یک گروه مرجع معنا پیدا میکند، و اینکه کدام گروه به کار رفته است، یکی از پرپیامدترین و کمتر اعلامشدهترین واقعیتها درباره هر آزمونی است.
- یک آزمون روانسنجی در واقع چگونه ساخته میشوداز تعریف سازه تا انتشار هنجارها، این فرایند سالها طول میکشد و بیشتر آنچه وارد آن میشود کنار گذاشته میشود. آشنایی با این مراحل روشن میکند که یک پرسشنامهٔ سریع اینترنتی کدامیک از آنها را نادیده گرفته است.
- وقتی گفته میشود یک آزمون «اعتبارسنجیشده» است، چه معنایی دارد؟این واژه تنظیمشده نیست و محصولاتی که هیچ کاری برای آن انجام ندادهاند آن را آزادانه به کار میبرند. در اینجا میخوانید این واژه وقتی معنایی دارد چه معنایی دارد، و چهار پرسشی که این دو حالت را از هم جدا میکنند.
- چرا بیشتر آزمونهای شخصیت اینترنتی پایا نیستندنه از آن رو که صادق نیستند، بلکه از آن رو که گامهایی که یک اندازهگیری را قابلاعتماد میکنند دیده نمیشوند، پرهزینهاند و نادیده گرفتنشان آسان است؛ و نادیده گرفتن آنها هیچ تغییری در ظاهر نتیجه ایجاد نمیکند.
- خودگزارشی چه چیزهایی را میتواند بسنجد و چه چیزهایی را نمیتواندپرسشنامهها از شما میخواهند ناظر خودتان باشید، و این روش برای بعضی چیزها بهتر از بقیه جواب میدهد. دانستن اینکه این روش در کجا قوی است و در کجا ناکام میماند، شیوهٔ خواندن هر نتیجه را تغییر میدهد.
- وقتی یک آزمون چیزی را پیشبینی میکند، یعنی چههمبستگی 0.30 در پژوهشهای شخصیت یافتهای قوی است، اما برای تصمیمگیری درباره یک فرد مبنایی ضعیف است. هر دو گزاره درستاند و فاصلهٔ میان آنها عامل بیشتر سوءاستفادهها از نتایج آزمون است.
- غربالگری به معنای تشخیص نیستپرسشنامه غربالگری برای شناسایی حداکثر موارد ممکن ساخته میشود و در ازای آن نرخ بالای مثبت کاذب را میپذیرد. خواندن نمره غربالگری بهعنوان تشخیص، عکس چیزی است که این ابزار برای آن طراحی شده است.