מה זה פסיכומטריקה?
התחום שעובד האם מדידה פסיכולוגית טובה - והסיבה שניתן מבחנים השואלים שאלות דומות שונה עצום בחשיבות התוצאות שלהם.
פסיכומטריקה היא הענף של הפסיכולוגיה העוסק במדידה עצמה. לא במשמעותה של מוחצנות, אלא בשאלה אם קבוצת שאלות נתונה אכן מודדת מוחצנות, כמה טעות יש במספר המתקבל, ומה המספר הזה רשאי לנבא.
להבחנה הזו יש חשיבות רבה יותר ממה שנדמה. כל אחד יכול לכתוב 20 שאלות על מידת החברותיות של אדם ולסכם את התשובות. פסיכומטריקה היא העבודה שבאה אחר כך: להראות ש-20 השאלות מתלכדות זו עם זו, שהן מודדות דבר אחד ולא שלושה, שאותו אדם מקבל ציון דומה בערך בחודש הבא, שהציון קשור לאופן שבו האדם הזה מתנהג בפועל, ושכל המנגנון פועל באותו אופן עבור בן 22 בליסבון כמו עבור בן 55 במינכן.
למה נדרשה דיסציפלינה
למדידה פיזיקלית יש יתרון שאין לפסיכולוגיה: אפשר להניח סרגל מטר ליד הדבר שמודדים. אין סרגל מטר למצפוניות. התכונה אינה ניתנת לצפייה ישירה: היא מוסקת מתוך התנהגות, ותשובות לשאלון הן שכבה נוספת של הסקה מעל זה.
זה מה שפסיכומטריקאים מכנים משתנה סמוי: משהו ממשי מספיק כדי שיהיו לו השלכות, אך נגיש תמיד רק דרך מדדים עקיפים. כל המנגנון המתודולוגי קיים בגלל העקיפות הזו. כל טכניקה שתפגוש (ניתוח גורמים, מקדמי מהימנות, תורת התגובה לפריט, מדגמי נורמה) היא ניסיון לומר משהו בר הגנה על גודל שאיש אינו יכול לצפות בו.
שלוש השאלות
הסר את המינוח, ופסיכומטריקה שואלת שלושה דברים על כל כלי מדידה.
האם הוא עקבי? אם המדידה היא ברובה רעש, שום דבר אחר אינו משנה. העקביות נבדקת בין פריטים (האם השאלות מסכימות זו עם זו?), לאורך זמן (האם אותו אדם מקבל אותו ציון בחודש הבא?), ובין מעריכים כשהדבר רלוונטי. זוהי מהימנות.
האם הוא מודד את מה שהוא טוען שהוא מודד? שאלון יכול להיות עקבי לחלוטין ועדיין למדוד את הדבר הלא נכון. סולם שטוען למדוד פוטנציאל מנהיגות אך מתואם ב-0.8 עם הערכה עצמית פשוטה מודד הערכה עצמית. זהו תוקף, והוא אינו תכונה שלכלי מדידה פשוט יש או אין: הוא טיעון הנבנה מראיות מצטברות.
בהשוואה למי? ציון גולמי של 34 אינו אומר דבר כשלעצמו. הוא נעשה בר פירוש רק מול קבוצת התייחסות: 34 הוא גבוה ביחס לאיזו אוכלוסייה, שנמדדה מתי, והיכן? זו העבודה של הנורמות, וזהו השלב שרוב המבחנים הצרכניים מדלגים עליו לחלוטין.
איך נראית פרקטיקה טובה
לכלי מדידה שנבנה היטב יש תיעוד מסודר. מישהו פרסם כיצד נכתבו הפריטים ואילו מהם נפסלו. מישהו דיווח על מקדמי המהימנות, במדגמים מוגדרים, עם גודלי מדגם. מישהו בדק אם המבנה הגורמי החזיק מעמד במדגם שני ובלתי תלוי, ולא במדגם ששימש לבנייתו. מישהו בדק אם הפריטים מתנהגים באותו אופן בשפות ובקבוצות גיל שונות. ומישהו אחר, רצוי ללא אינטרס בכלי, ניסה לשחזר את הממצאים ודיווח מה קרה.
דבר מכל זה אינו הופך מבחן לחסין מטעויות. הוא הופך את מגבלותיו לניתנות לידיעה, וזו תכונה שונה ושימושית יותר. כלי שטעות המדידה שלו מתועדת אומר לך עד כמה לסמוך על הבדל קטן בין שני ציונים. כלי ללא אומדן טעות מפורסם אינו מדויק יותר; הוא פשוט שותק יותר בנוגע לחוסר הדיוק שלו.
לאן זה מותיר את הקורא
פסיכומטריקה לא תגיד לך שמבחן הוא אמת. היא תגיד לך עד כמה אפשר למתוח ציון לפני שהוא מפסיק להיות בעל משמעות: על אילו שאלות הוא יכול לענות, על אילו אוכלוסיות הוא כויל, וכמה גדול צריך להיות הבדל לפני שכדאי לשים אליו לב.
זו הבטחה צרה יותר מזו שרוב מוצרי האישיות מבטיחים. היא גם ההבטחה היחידה ששורדת את המפגש עם הראיות.
העמד למבחן
לקרוא על מדידה זה דבר אחד. לראות את הציון שלך מדווח עם המקור שלו, מדגם הנורמה שלו והמגבלות שלו זה דבר אחר. חינם לביצוע, ללא הרשמה נדרשת.
המשך לקרוא
- מהי מהימנות בבדיקה פסיכולוגית?מהימנות היא עקביות של מדידה, לא נכונות. מבחן יכול להיות בעל מהימנות גבוהה ועדיין למדוד את הדבר הלא נכון — וזו הסיבה שהיא השאלה הראשונה המוצגת ולא פעם אחרונה.
- מה זה תוקף בבדיקה פסיכולוגית?תוקף אינו תכונה שיש למבחן. זו טענה לגבי האם פרשנות מסוימת של ציון מסוים, למטרה מסוימת, ניתנת להגנה — וצריך לבנות אותה מחדש עבור כל שימוש חדש.
- מהו תוקף בנייה?השאלה הקשה ביותר במדידה: האם הדבר שאתה מודד קיים כפי שהגדרת אותו, והאם הכלי שלך מגיע אליו ולא למשהו סמוך.
- תוקף מתכנס ותוקף מפלהשתי דרישות תמונת ראי: מידה חייבת להסכים עם מה שהיא צריכה להסכים איתו, וחייבת להישאר נפרדת מממה שהיא טוענת שאינה. רוב הכלים החלשים נכשלים בשנייה.
- מהו אלפא של קרונבך — ומה הוא לאהסטטיסטיקה המדווחת ביותר בבדיקה פסיכולוגית, והמעובדת בצורה שגויה ביותר. Alpha לא מספר לך שסולם הוא חד-ממדי, וערך גבוה הוא לעתים קרובות סימפטום ולא סגולה.
- שגיאה תקנית של מדידה: עד כמה הציון שלך יכול להיות כביכולכל ציון נושא שוליים של שגיאה, ולרוב מבחנים פסיכולוגיים הוא רחב יותר מאשר אנשים מניחים. זה המספר שאומר לך מתי הבדל אמיתי ומתי הוא רעש.
- נורמות ואחוזונים: מה הציון שלך מושווה אליוציון גולמי אינו ניתן לפרשנות בעצמו. הוא הופך למשמעותי רק מול קבוצת ייחוס - ואילו קבוצה שימשה הוא אחד מהעובדות הקונסקוונציאליות ביותר והפחות מפורסמות על כל מבחן.
- איך מבחן פסיכומטרי באמת בנוימהגדרת קונסטרוקט לנורמות פורסומות, הרצף לוקח שנים וזורק את רובו של מה שנכנס אליו. ידיעת השלבים הופכת ברור אילו מהם כמעט חידון באינטרנט דילג.
- מה זה אומר כשמבחן נקרא מאומת?המילה אינה מוסדרת ומשמשת בחופשיות על ידי מוצרים שלא עשו כל עבודה. הנה מה זה אומר כשזה אומר משהו, וארבע השאלות שמפרידות בין שני המקרים.
- למה רוב מבחני אישיות באינטרנט אינם אמיניםלא משום שהם לא כנים, אלא משום שהשלבים שגורמים למדידה להיות אמינה אינם נראים, יקרים וקל לדלג - ודילוג עליהם לא משנה שום דבר בנוגע לאופן שהתוצאה נראית.
- מה דיווח עצמי יכול ולא יכול למדודשאלונים מבקשים ממך להיות התצפיתן על עצמך, מה שעובד טוב יותר לחלק מהדברים מאחרים. ידיעה איפה השיטה חזקה ואיפה היא נכשלת משנה את הדרך שבה אתה קורא כל דוח.
- מה זה אומר כשמבחן מנבא משהוקורלציה של 0.30 היא ממצא חזק במחקר אישיות ובסיס חלש להחלטה לגבי אדם אחד. שתי הטענות נכונות, והפער ביניהן גורם לרוב השימוש לרעה בתוצאות מבחנים.
- סינון אינו אבחנהשאלון סינון בנוי כדי לתפוס כמה שיותר מקרים אפשריים, ומקבל שיעור גבוה של תוצאות חיוביות כוזבות כמחיר. לקרוא ציון סינון כאבחון הופך את מה שהוא נועד לעשות.