noesisnoesis
איך המדידה עובדת

מה זה אומר כשמבחן נקרא מאומת?

המילה אינה מוסדרת ומשמשת בחופשיות על ידי מוצרים שלא עשו כל עבודה. הנה מה זה אומר כשזה אומר משהו, וארבע השאלות שמפרידות בין שני המקרים.

"מתוקף מדעית" אינו מונח מוגן. איש אינו מאשר אותו, שום גוף אינו מבקר אותו, והוא מופיע על מוצרים שכל בסיס הראיות שלהם הוא שהרבה אנשים כבר עשו אותם. כדאי לדעת מה פירושו כשמשתמשים בו כראוי.

בקצרה

לכלי מתוקף יש תיעוד מפורסם המראה מה הוא מודד, באיזו מידת דיוק, באילו אוכלוסיות, ולאילו שימושים ניתן להשתמש בציונים שלו באופן לגיטימי. תיקוף אינו תעודה. זהו גוף של ראיות, שנאסף בדרך כלל לאורך שנים, ובדרך כלל כולל ממצאים שמגבילים את השימוש בכלי ולא מחמיאים לו.

קיומן של מגבלות מתועדות הוא אחד הסימנים הטובים יותר. ספרות תיקוף אמיתית מלאה בהן: הסולם הזה מתפקד בצורה חלשה בקרב מתבגרים, ההיבט ההוא אינו משתחזר, נקודת החתך תלויה באוכלוסייה. מוצר שמדווח רק על חוזקות לא פרסם את התיקוף שלו; הוא פרסם את השיווק שלו.

ארבע שאלות שעושות את העבודה

מהו הפרסום המקורי? לכלי מתוקף יש מאמר מקורי בכתב עת שפיט, עם מחברים, שנה ובדרך כלל DOI. המאמר מדווח כיצד פותחו הפריטים ומה היו התכונות הפסיכומטריות הראשוניות. אם איש אינו יכול לנקוב בשם המאמר, אין תיקוף לדון בו.

האם המבנה אושש על ידי מישהו אחר? צוות הפיתוח ישחזר את המבנה שהוא עצמו תכנן. מה שחשוב הוא האם קבוצה בלתי תלויה, עם נתונים בלתי תלויים, מצאה את אותו הדבר. זו השאלה האינפורמטיבית ביותר שאפשר לשאול, וזו שנותרת לרוב ללא מענה.

על איזו אוכלוסייה נבנו הנורמות, ומתי? ציון הוא מיקום בהתפלגות ייחוס. כלי שמדווח על אחוזון בלי לציין לאיזו אוכלוסייה הוא מתייחס נתן לך מספר בלי מכנה.

מה הוא מוסיף? תוקף תוספתי מעבר למדד מבוסס. מבנים ממותגים רבים מאוד נכשלים כאן: הם מתואמים כה גבוה עם תכונה קיימת עד שאינם מסבירים שונות נוספת בשום דבר. זוהי תוצאה רגילה של בחינה מדעית, והיא בלתי נראית אלא אם מישהו עורך את המבחן.

היכן התרגום מסבך את העניין

כלי שתוקף באנגלית אינו מתוקף בכך בגרמנית. התאמה בין-תרבותית נאותה מחייבת תרגום ותרגום חוזר, סקירת מומחים, ראיונות קוגניטיביים, ולאחר מכן מחקר פסיכומטרי חדש בשפה החדשה, הבודק אם מבנה הגורמים נשמר ואם פריטים בודדים מתפקדים באופן שקול בין קבוצות.

כלים שמדלגים על כך נפוצים. שאלון שהתיקוף המקורי שלו ללא רבב עשוי להתנהג באופן שונה למדי בשפה שבה לפריט מרכזי יש קונוטציה שונה, ואין דרך לדעת זאת בלי המחקר. כשמבחן מוצע בעשר שפות, השאלה המועילה היא האם הוא תוקף בעשר שפות, או תוקף באחת ותורגם לתשע.

מה תיקוף אינו קונה

הוא אינו הופך ציון לוודאי. כלי מתוקף עדיין נושא טעות מדידה, עדיין מתאר סדירות ברמת האוכלוסייה ולא גורל אישי, ועדיין מודד רק את מה שהפריטים שלו מגיעים אליו.

מה שתיקוף כן קונה הוא מגבלות שאפשר לדעת אותן. אפשר לברר כמה טעות, באיזו אוכלוסייה, לאיזו מטרה. זו טענה צנועה יותר מ"המבחן הזה חושף מי אתה באמת", והיא היחידה שעומדת במבחן.

אם אתה רוצה לראות איך נראה התיעוד כשהוא קיים, כל מבחן בקטלוג של NOESIS מציין את הכלי שהוא מיישם, את מחבריו ושנתו, את שיטת הציון שלו ואת הראיות שמאחוריו, כולל היכן ראיות אלה שנויות במחלוקת.

העמד למבחן

לקרוא על מדידה זה דבר אחד. לראות את הציון שלך מדווח עם המקור שלו, מדגם הנורמה שלו והמגבלות שלו זה דבר אחר. חינם לביצוע, ללא הרשמה נדרשת.

המשך לקרוא