ความตรงเชิงสอดคล้องและความตรงเชิงจำแนก
ข้อกำหนดสองด้านที่สะท้อนกัน: เครื่องมือวัดต้องสอดคล้องกับสิ่งที่ควรสอดคล้อง และต้องแตกต่างจากสิ่งที่อ้างว่าไม่ใช่ เครื่องมือที่อ่อนแอส่วนใหญ่ล้มเหลวในข้อที่สอง
ความตรงเชิงสอดคล้องและความตรงเชิงจำแนกเป็นสองด้านของข้อกำหนดเดียว เครื่องมือวัดต้องมีสหสัมพันธ์กับสิ่งที่ควรมีตามทฤษฎี และต้องไม่มีสหสัมพันธ์สูงเกินไปกับสิ่งที่อ้างว่าแตกต่าง การบรรลุอย่างหนึ่งโดยไม่มีอีกอย่างไม่ใช่ความสำเร็จบางส่วน แต่มักเป็นสัญญาณว่าโครงสร้างไม่ใช่สิ่งที่อ้างว่าเป็น
ความตรงเชิงสอดคล้อง
หลักฐานเชิงสอดคล้องแสดงว่าเครื่องมือวัดสอดคล้องกับตัวชี้วัดอื่นของสิ่งเดียวกัน มาตรวัดความวิตกกังวลใหม่ควรมีสหสัมพันธ์อย่างมากกับมาตรวัดความวิตกกังวลที่เป็นที่ยอมรับ กับการประเมินของนักคลินิก และในอุดมคติกับสิ่งที่ไม่ใช่แบบสอบถามอีกชุด เช่น การวัดทางสรีรวิทยาหรือพฤติกรรมหลีกเลี่ยงที่สังเกตได้
สหสัมพันธ์ที่นี่มักคาดว่าจะสูงกว่า 0.50 มักสูงกว่า 0.70 เมื่อเครื่องมือเปรียบเทียบเป็นเครื่องมือที่เป็นที่ยอมรับสำหรับโครงสร้างเดียวกัน ต่ำกว่านั้น มาตรวัดใหม่หรือเครื่องมือเปรียบเทียบกำลังวัดสิ่งอื่น
มีกับดัก สหสัมพันธ์ 0.95 กับมาตรวัดที่มีอยู่ไม่ใช่ชัยชนะ แต่หมายความว่าเครื่องมือใหม่เป็นการห่อใหม่ และคำถามที่ตรงไปตรงมาคือมันเพิ่มอะไร ความตรงเชิงสอดคล้องเป็นพื้นฐาน ไม่ใช่เป้าหมายที่จะเพิ่มสูงสุด
ความตรงเชิงจำแนก
หลักฐานเชิงจำแนกแสดงว่าเครื่องมือวัดยังคงแยกจากโครงสร้างที่อ้างว่าแตกต่าง นี่คือจุดที่ความล้มเหลวที่น่าสนใจอยู่
รูปแบบนี้เกิดซ้ำในวรรณกรรม Grit มีสหสัมพันธ์ประมาณ 0.84 กับความรับผิดชอบ ใกล้พอที่การวิเคราะห์อภิมานพบว่ามันแทบไม่เพิ่มอะไรให้กับการทำนายทางวิชาการเมื่อควบคุมความรับผิดชอบแล้ว ความฉลาดทางอารมณ์แบบรายงานตนเองทับซ้อนอย่างมากกับความมั่นคงทางอารมณ์ การเปิดเผย และความรับผิดชอบรวมกัน ความแปรปรวนร่วมใน Dark Triad ส่วนใหญ่หายไปเมื่อนำ Honesty-Humility จากแบบจำลอง HEXACO มาพิจารณา ในแต่ละกรณี โครงสร้างถูกนำเสนอว่าเป็นดินแดนใหม่แต่กลับเป็นภูมิภาคที่เปลี่ยนชื่อของแผนที่ที่มีอยู่
ความตรงเชิงจำแนกยังเป็นจุดที่ผลกระทบของวิธีการปรากฏ หากทุกโครงสร้างที่รายงานตนเองในการศึกษามีสหสัมพันธ์ 0.4 กับทุกโครงสร้างอื่น ปัจจัยร่วมอาจเป็นรูปแบบการตอบของผู้ตอบมากกว่าจิตวิทยาร่วมใดๆ
การทดสอบที่ชี้ขาด
ขั้นตอนที่เด็ดขาดคือความตรงเชิงเพิ่มขึ้น: ใส่เครื่องมือที่เป็นที่ยอมรับในการถดถอยก่อน จากนั้นเครื่องมือใหม่ และดูว่าเครื่องมือใหม่อธิบายความแปรปรวนเพิ่มเติมในผลลัพธ์หรือไม่ หากไม่ โครงสร้างอาจยังน่าสนใจในเชิงทฤษฎี แต่เครื่องมือไม่ได้วัดอะไรที่สาขาไม่มีอยู่แล้ว
นี่เป็นมาตรฐานที่เข้มงวดและมาตรวัดที่เผยแพร่จำนวนมากไม่เคยถูกทดสอบ เมื่อถูกทดสอบ ผลลัพธ์มักเป็นผลการค้นพบความซ้ำซ้อนข้างต้น นั่นไม่ใช่เรื่องอื้อฉาว แต่เป็นการตัดแต่งทางวิทยาศาสตร์ปกติ แต่มันหมายความว่าความนิยมของโครงสร้างไม่ได้ให้ข้อมูลว่ามันจะรอดจากการทดสอบหรือไม่
สิ่งที่เปลี่ยนสำหรับผู้อ่าน
เมื่อแบบทดสอบรายงานคะแนนหลายคะแนน คำถามที่มีประโยชน์คือคะแนนเหล่านั้นแตกต่างกันจริงหรือไม่ สี่มิติที่มีสหสัมพันธ์ 0.8 กันเป็นมิติเดียวที่มีสี่ป้ายกำกับ และโปรไฟล์ที่สร้างจากพวกมันจะดูแตกต่างในขณะที่แทบไม่มีข้อมูลอิสระ
เครื่องมือที่รายงานสหสัมพันธ์ระหว่างมาตรวัดช่วยให้คุณตรวจสอบสิ่งนี้ด้วยตัวเอง เครื่องมือที่นำเสนอประเภทสี่ส่วนโดยไม่แสดงว่าส่วนต่างๆ เกี่ยวข้องกันอย่างไรทำให้การตรวจสอบเป็นไปไม่ได้ ซึ่งมักเป็นจุดประสงค์
ลองทำแบบทดสอบดู
การอ่านเกี่ยวกับการวัดผลเป็นเรื่องหนึ่ง การเห็นคะแนนของคุณเองที่รายงานพร้อมแหล่งที่มา กลุ่มตัวอย่างเกณฑ์ปกติ และข้อจำกัดของมันเป็นอีกเรื่องหนึ่ง ทำได้ฟรี ไม่ต้องสมัครสมาชิก
อ่านต่อ
- จิตวิทยาการวัดคืออะไรศาสตร์ที่พิจารณาว่าการวัดทางจิตวิทยานั้นดีหรือไม่ และเหตุผลที่แบบทดสอบสองชุดที่ถามคำถามคล้ายกันอาจแตกต่างกันอย่างมากในคุณค่าของผลลัพธ์
- ความเที่ยงในการทดสอบทางจิตวิทยาคืออะไรความเที่ยงคือความสม่ำเสมอของการวัด ไม่ใช่ความถูกต้อง แบบทดสอบอาจมีความเที่ยงสูงแต่ยังคงวัดสิ่งผิด ด้วยเหตุนี้จึงเป็นคำถามแรกที่ถูกถามและไม่เคยเป็นคำถามสุดท้าย
- ความตรงในการทดสอบทางจิตวิทยาคืออะไรความตรงไม่ใช่คุณสมบัติที่แบบทดสอบมี แต่เป็นข้อโต้แย้งว่าการตีความคะแนนเฉพาะด้าน เพื่อจุดประสงค์เฉพาะนั้น สามารถปกป้องได้หรือไม่ และต้องสร้างใหม่สำหรับการใช้งานใหม่ทุกครั้ง
- ความตรงเชิงโครงสร้างคืออะไรคำถามที่ยากที่สุดในการวัด: สิ่งที่คุณกำลังวัดมีอยู่จริงตามที่คุณกำหนดหรือไม่ และเครื่องมือของคุณเข้าถึงมันแทนที่จะเป็นสิ่งที่อยู่ข้างเคียงหรือไม่
- ค่าอัลฟาของครอนบาคคืออะไร และไม่ใช่อะไรสถิติที่ถูกรายงานมากที่สุดในการทดสอบทางจิตวิทยา และถูกอ่านผิดมากที่สุด อัลฟาไม่ได้บอกว่ามาตรวัดเป็นมิติเดียว และค่าที่สูงมักเป็นอาการมากกว่าคุณธรรม
- ความคลาดเคลื่อนมาตรฐานของการวัด: คะแนนของคุณอาจคลาดเคลื่อนได้มากเพียงใดทุกคะแนนมีช่วงความคลาดเคลื่อน และสำหรับแบบทดสอบทางจิตวิทยาส่วนใหญ่จะกว้างกว่าที่คนคิด นี่คือตัวเลขที่บอกคุณว่าความแตกต่างเป็นของจริงหรือเป็นเพียงสัญญาณรบกวน
- เกณฑ์ปกติและเปอร์เซ็นไทล์: คะแนนของคุณถูกเปรียบเทียบกับอะไรคะแนนดิบไม่สามารถตีความได้ด้วยตัวเอง มันมีความหมายก็ต่อเมื่อเทียบกับกลุ่มอ้างอิง และกลุ่มที่ใช้คือข้อเท็จจริงที่สำคัญที่สุดและถูกโฆษณาน้อยที่สุดเกี่ยวกับแบบทดสอบใดๆ
- แบบทดสอบทางจิตวิทยาถูกสร้างขึ้นอย่างไรตั้งแต่การกำหนดโครงสร้างจนถึงเกณฑ์ปกติที่เผยแพร่ ลำดับขั้นตอนใช้เวลาหลายปีและทิ้งสิ่งที่ใส่เข้าไปส่วนใหญ่ การรู้ขั้นตอนทำให้เห็นชัดว่าแบบทดสอบออนไลน์ด่วนข้ามขั้นตอนไหน
- การเรียกแบบทดสอบว่าผ่านการตรวจสอบหมายความว่าอย่างไรคำนี้ไม่ได้ถูกควบคุมและถูกใช้อย่างเสรีโดยผลิตภัณฑ์ที่ไม่ได้ทำงานใดๆ เลย นี่คือความหมายเมื่อมันมีความหมาย และคำถามสี่ข้อที่แยกสองกรณีออกจากกัน
- ทำไมแบบทดสอบบุคลิกภาพออนไลน์ส่วนใหญ่จึงไม่น่าเชื่อถือไม่ใช่เพราะไม่สุจริต แต่เพราะขั้นตอนที่ทำให้การวัดน่าเชื่อถือนั้นมองไม่เห็น มีราคาแพง และง่ายต่อการข้าม และการข้ามไม่เปลี่ยนแปลงอะไรเกี่ยวกับรูปลักษณ์ของผลลัพธ์
- แบบรายงานตนเองสามารถวัดอะไรได้และไม่ได้แบบสอบถามขอให้คุณเป็นผู้สังเกตตนเอง ซึ่งได้ผลดีกับบางสิ่งมากกว่าสิ่งอื่น การรู้ว่าวิธีนี้แข็งแกร่งตรงไหนและล้มเหลวตรงไหนจะเปลี่ยนวิธีที่คุณอ่านผลลัพธ์ใดก็ตาม
- การที่แบบทดสอบทำนายบางสิ่งได้หมายความว่าอย่างไรสหสัมพันธ์ 0.30 เป็นผลการค้นพบที่แข็งแกร่งในการวิจัยบุคลิกภาพ แต่เป็นพื้นฐานที่อ่อนแอสำหรับการตัดสินใจเกี่ยวกับคนคนเดียว ทั้งสองข้อความเป็นจริง และช่องว่างระหว่างนั้นทำให้เกิดการใช้ผลทดสอบในทางที่ผิดส่วนใหญ่
- การคัดกรองไม่ใช่การวินิจฉัยแบบสอบถามคัดกรองถูกสร้างขึ้นเพื่อจับกรณีที่เป็นไปได้ให้ได้มากที่สุด โดยยอมรับอัตราบวกเท็จที่สูงเป็นราคาที่ต้องจ่าย การอ่านคะแนนคัดกรองเป็นการวินิจฉัยนั้นกลับข้างสิ่งที่มันถูกออกแบบมาให้ทำ