In order to monitor interrater cons

In order to monitor interrater consistency, some responses are rated by two raters for every item.Given the inherent judgment required for scoring CR items, equally well-trained raters may not always assign exactly the same ratings to the same responses. The TOEIC Speaking or Writing scoring team considers ratings that differ by no more than 1 raw score point as an allowable difference.When scores from two raters differ by more than one score point, they are considered discrepant,and resolution by a scoring leader (a rater with additional training and experience) is required before scores are reported.

ผลลัพธ์ (ไทย) 1:

เพื่อตรวจสอบความสอดคล้อง interrater ตอบบางรับคะแนน raters สองสำหรับสินค้าทั้งหมด ให้ตัดสินโดยธรรมชาติที่จำเป็นสำหรับการให้คะแนนสินค้า CR เท่า ๆ raters ฝึกฝนอาจไม่เสมอกำหนดว่าจัดอันดับเดียวกันตอบเหมือนกัน TOEIC พูด หรือเขียนให้คะแนนทีมพิจารณาจัดอันดับที่แตกต่างไม่เกิน 1 ดิบคะแนนจุดเป็นผลต่างที่ยอมรับได้ เมื่อคะแนนจาก raters ที่สองแตกต่างกัน โดยคะแนนหนึ่งมากกว่าจุด ว่า discrepant และแก้ปัญหา โดยผู้นำการให้คะแนน (rater ฝึกอบรมเพิ่มเติมและประสบการณ์) ที่จำเป็นก่อนรายงานคะแนน

ผลลัพธ์ (ไทย) 2:

เพื่อตรวจสอบความสอดคล้อง interrater ตอบสนองบางส่วนได้รับการประเมินโดยผู้ประเมินสองสำหรับ item.Given ทุกการตัดสินโดยธรรมชาติที่จำเป็นสำหรับการให้คะแนนรายการ CR, ผู้ประเมินอย่างเท่าเทียมกันมีการฝึกอบรมอาจไม่เคยกำหนดว่าการจัดอันดับเดียวกันการตอบเดียวกัน พูด TOEIC หรือทีมการให้คะแนนจะพิจารณาการจัดอันดับการเขียนที่แตกต่างกันได้ไม่เกิน 1 จุดคะแนนดิบเป็นคะแนน difference.When อนุญาตจากสองผู้ประเมินที่แตกต่างกันมากกว่าหนึ่งจุดคะแนนที่พวกเขาได้รับการพิจารณาไม่ตรงกันและความละเอียดโดยเป็นผู้นำการให้คะแนน ( ผู้ประเมินที่มีการฝึกอบรมเพิ่มเติมและประสบการณ์) จะต้องก่อนที่จะมีการรายงานผลการแข่งขัน

ผลลัพธ์ (ไทย) 3:

เพื่อตรวจสอบความสอดคล้องของแบบอิง บางคำตอบอันดับสอง 2 ทุกรายการ ให้ความยุติธรรมที่แท้จริงที่จำเป็นสำหรับรายการ CR คะแนน เท่ากัน เป็นผู้ประเมินอาจไม่กำหนดว่าบริษัทเดียวกันเพื่อตอบสนองเดียวกัน การสอบ TOEIC พูดหรือเขียนให้คะแนนทีมที่แตกต่างโดยไม่พิจารณาคะแนนมากกว่า 1 คะแนนดิบ จุดแตกต่างที่ .เมื่อคะแนนจากสองจำนวนที่แตกต่างกันคะแนนมากกว่า 1 คะแนน พวกเขาจะถือว่าแตกต่างกัน และความละเอียด โดยคะแนนผู้นำ ( คนไทยด้วยการฝึกอบรมเพิ่มเติมและประสบการณ์ ) ต้องมีก่อนคะแนนรายงาน