Experimental generalisability studi

Experimental generalisability studies were carried out as part of the IELTS Speaking and Writing Revision Projects to investigate the reliability of ratings (Shaw 2004; Taylor & Jones 2001). More recent G-studies based on examiner certification data showed coefficients of 0.83–0.86 for Speaking and 0.81–0.89 for Writing.



The IELTS exam contains four components upon which an overall band score is awarded. Thus an estimate of composite reliability offers a useful measure for overall test reliability. Following Feldt & Brennan (1989), composite reliability estimates were calculated based on test data from 2009. To generate an appropriately cautious estimate, minimum alpha values were used for the objectively marked papers, and G-coefficients for the single rater condition on subjectively marked scores. The composite reliability estimate for both the Academic and General Training modules was 0.96 and produced a composite SEM of 0.23.

ผลลัพธ์ (ไทย) 2:

การศึกษา generalisability ทดลองได้ดำเนินการเป็นส่วนหนึ่งของการพูดการสอบ IELTS และการเขียนโครงการที่มีการทบทวนการตรวจสอบความน่าเชื่อถือของการจัดอันดับ (ชอว์ 2004; & เทย์เลอร์โจนส์ 2001) ล่าสุด G-การศึกษาบนพื้นฐานของข้อมูลที่ได้รับการรับรองการตรวจสอบพบว่ามีค่าสัมประสิทธิ์ของ 0.83-0.86 สำหรับการพูดและการเขียน 0.81-0.89. สอบ IELTS มีสี่องค์ประกอบซึ่งคะแนนโดยรวมวงดนตรีที่ได้รับรางวัล ดังนั้นการประเมินความน่าเชื่อถือคอมโพสิตมีตัวชี้วัดที่มีประโยชน์สำหรับความน่าเชื่อถือการทดสอบโดยรวม ต่อไปนี้ Feldt และเบรนแนน (1989) ประมาณการความน่าเชื่อถือคอมโพสิตจะถูกคำนวณบนพื้นฐานของข้อมูลการทดสอบจากปี 2009 เพื่อสร้างการประมาณการระมัดระวังอย่างเหมาะสมค่าอัลฟาขั้นต่ำที่ใช้ในการทำเครื่องหมายเอกสารวัตถุและ G-ค่าสัมประสิทธิ์การประเมินสภาพเดียวในการทำเครื่องหมายจิตใจ คะแนน การประเมินความน่าเชื่อถือคอมโพสิตสำหรับทั้งนักวิชาการและโมดูลการฝึกอบรมทั่วไปคือ 0.96 และผลิตคอมโพสิตของ SEM 0.23

ผลลัพธ์ (ไทย) 3:

การศึกษา generalisability ทดลองครั้งนี้เป็นส่วนหนึ่งของการสอบ IELTS การพูดและการเขียนโครงการการตรวจสอบความน่าเชื่อถือของบริษัทชอว์ 2004 ; เทย์เลอร์&โจนส์ 2544 ) ล่าสุด g-studies ขึ้นอยู่กับข้อมูลการรับรองผู้ตรวจสอบพบเท่ากับ 0.83 และ 0.86 สำหรับการพูดและ 0.81 – 0.89 สำหรับการเขียน .



การสอบ IELTS ประกอบด้วยสี่ส่วนที่เป็นคะแนนโดยรวม คือ วงดนตรีที่ได้รับรางวัล ดังนั้น การประเมินความน่าเชื่อถือของคอมโพสิตเสนอมาตรการที่เป็นประโยชน์สำหรับความน่าเชื่อถือการทดสอบโดยรวม ต่อไปนี้เฟลท์ &เบรน ( 1989 ) , ประมาณการความน่าเชื่อถือประกอบคำนวณบนพื้นฐานของข้อมูลการทดสอบจาก 2009 เพื่อสร้างการประเมินระมัดระวังอย่างเหมาะสมเราใช้ค่าต่ำสุดสำหรับวัตถุเครื่องหมายต่างๆ และ g-coefficients สำหรับเงื่อนไขระดับเดียวในจิตใจให้คะแนน การประเมินความน่าเชื่อถือรวมทั้งวิชาการและทั่วไปโมดูลการฝึกอบรมเท่ากับ 0.96 และผลิต SEM รวม 0.23 .