Problem Statement: There have been

Problem Statement: There have been many attempts to research the effective
assessment of writing ability, and many proposals for how this might be
done. In this sense, rater reliability plays a crucial role for making vital
decisions about testees in different turning points of both educational and
professional life. Intra-rater and inter-rater reliability of essay assessments
made by using different assessing tools should also be discussed with the
assessment processes.
Purpose of Study: The purpose of the study is to reveal possible variation or
consistency in grading essay writing ability of EFL writers by the
same/different raters using general impression marking (GIM), essay criteria
checklist (ECC), and essay assessment scale (ESAS), and discuss rater
reliability.
Methods: Quantitative and qualitative data were used to present the
discussion and implications for the reliability of ratings and the consistency of
the measurement results. The assessing tools were applied to 44 EFL
university students and 10 graders assessed the essay writing ability of the
students by using GIM, ECC, and ESAS in different occasions.
Findings and Results: The findings and results of the analyses indicated that
using general impression marking is evidently not reliable for assessing
essays. The coefficients obtained from checklist and scale assessments,
considering the correlation coefficients, estimated variance components, and
generalizability coefficients present valuable information, clearly show that
there is always variation among the results.

ผลลัพธ์ (ไทย) 1:

รายงานปัญหา: มีความพยายามในการวิจัยมีประสิทธิภาพประเมินความสามารถ และข้อเสนอมากสำหรับวิธีนี้อาจเป็นเสร็จแล้ว ในนี้รู้สึก rater ความน่าเชื่อถือมีบทบาทสำคัญในการทำความตัดสินใจเกี่ยวกับ testees ในจุดเปลี่ยนที่แตกต่างกันทั้งทางการศึกษา และชีวิตมืออาชีพ อินทรา rater และ rater ระหว่างความน่าเชื่อถือของการประเมินผลเรียงทำโดยต่างประเมินเครื่องมือควรยังได้กล่าวด้วยการกระบวนการประเมินวัตถุประสงค์ของการศึกษา: วัตถุประสงค์ของการศึกษาคือการ เปิดเผยการเปลี่ยนแปลงได้ หรือความสม่ำเสมอในการจัดเกรดความสามารถของ EFL เขียนโดยการเขียนเรียงความการใช้เครื่องประทับใจทั่วไป (ห้องออก), เกณฑ์เรียง raters เหมือนกัน/แตกต่างกันรายการตรวจสอบ (ECC), ประเมินเรียงขนาด (ESAS), และหารือ raterความน่าเชื่อถือวิธีการ: ใช้ในการนำเสนอข้อมูลเชิงปริมาณ และเชิงคุณภาพสนทนาและผลกระทบสำหรับความน่าเชื่อถือของการจัดอันดับและความสอดคล้องของผลการประเมิน เครื่องมือประเมินที่ใช้กับ 44 EFLนักศึกษามหาวิทยาลัยและนักเรียน 10 ประเมินเรียงความเขียนความสามารถของการนักเรียน โดยใช้ห้องออก ECC และ ESAS ในโอกาสต่าง ๆผลการวิจัยและผล: ผลการวิจัยและผลการวิเคราะห์ที่ระบุความประทับใจทั่วไปที่ทำเครื่องหมายเป็นกรีซไม่เชื่อถือได้สำหรับการประเมินบทความ สัมประสิทธิ์ที่ได้จากการตรวจสอบและมาตราส่วนประเมินพิจารณาค่าสัมประสิทธิ์สหสัมพันธ์ ประเมินผลต่างส่วนประกอบ และgeneralizability สัมประสิทธิ์นำเสนอข้อมูล แสดงอย่างชัดเจนว่าเสมอมีความผันแปรระหว่างผลลัพธ์

ผลลัพธ์ (ไทย) 2:

คำชี้แจงปัญหา: มีความพยายามมากมายในการวิจัยที่มีประสิทธิภาพการประเมินความสามารถในการเขียนและข้อเสนอมากมายสำหรับวิธีการนี้อาจจะมีการทำ ในแง่นี้ความน่าเชื่อถือผู้ประเมินมีบทบาทสำคัญสำหรับการทำที่สำคัญการตัดสินใจเกี่ยวกับวิชาในจุดหักเหที่แตกต่างกันของทั้งสองการศึกษาและชีวิตอาชีพ ภายในประเมินและความน่าเชื่อถือระหว่างผู้ประเมินของการประเมินการเขียนเรียงความทำโดยใช้เครื่องมือการประเมินที่แตกต่างกันนอกจากนี้ยังควรมีการหารือกับกระบวนการการประเมิน. วัตถุประสงค์ของการศึกษา: วัตถุประสงค์ของการศึกษาคือการแสดงให้เห็นถึงการเปลี่ยนแปลงที่เป็นไปได้หรือความมั่นคงในความสามารถการเขียนเรียงความการจัดลำดับของนักเขียนEFL โดยผู้ประเมินเดียวกัน/ ที่แตกต่างกันโดยใช้การแสดงผลทั่วไปเครื่องหมาย (GIM) เกณฑ์การเขียนเรียงความรายการตรวจสอบ (ECC) และระดับการประเมินการเขียนเรียงความ (ESAS) และหารือเกี่ยวกับการประเมินความน่าเชื่อถือ. วิธีการ: ข้อมูลเชิงปริมาณและเชิงคุณภาพถูกนำมาใช้เพื่อนำเสนอการอภิปรายและความหมายสำหรับความน่าเชื่อถือของการให้คะแนนและความสอดคล้องของผลการวัด เครื่องมือการประเมินที่ถูกนำไปใช้กับ 44 EFL นักศึกษามหาวิทยาลัยและ 10 คารมการประเมินความสามารถในการเขียนเรียงความของนักเรียนโดยใช้GIM, ECC และ ESAS ในโอกาสที่แตกต่างกัน. ผลการวิจัยและผลการศึกษา: ผลการวิจัยและผลการวิเคราะห์แสดงให้เห็นว่าการใช้การแสดงผลทั่วไปการทำเครื่องหมายคือเห็นได้ชัดว่าไม่น่าเชื่อถือสำหรับการประเมินการเขียนเรียงความ ค่าสัมประสิทธิ์ที่ได้จากรายการตรวจสอบและการประเมินผลขนาดพิจารณาค่าสัมประสิทธิ์สหสัมพันธ์ประมาณองค์ประกอบความแปรปรวนและค่าสัมประสิทธิ์generalizability ข้อมูลที่มีค่าในปัจจุบันอย่างเห็นได้ชัดแสดงให้เห็นว่ามีการเปลี่ยนแปลงอยู่เสมอในหมู่ผล

ผลลัพธ์ (ไทย) 3:

แจ้งปัญหา : มีความพยายามหลายการวิจัยการประเมินประสิทธิภาพ
ของความสามารถในการเขียน และข้อเสนอมากมายสำหรับวิธีนี้อาจ
เสร็จแล้ว ในความรู้สึกนี้ , ไม่มีความน่าเชื่อถือ มีบทบาทสําคัญสําหรับการทําสําคัญ
ตัดสินใจในจุดเปลี่ยนของกลุ่มตัวอย่างแตกต่างกันทั้งการศึกษาและ
ชีวิตมืออาชีพ ระดับภายในและระหว่างระดับความน่าเชื่อถือของการประเมิน
.ทำโดยใช้เครื่องมือที่แตกต่างกันการประเมินควรปรึกษา

การประเมินกระบวนการ วัตถุประสงค์ของการศึกษา : วัตถุประสงค์ของการศึกษาคือการเปิดเผยการเปลี่ยนแปลงที่เป็นไปได้หรือ
ความสอดคล้องในการให้คะแนนความสามารถในการเขียนเรียงความของนักเขียน EFL โดย
เดียวกันที่แตกต่างกัน / ผู้ประเมินใช้ความประทับใจทั่วไปเครื่องหมาย ( คิม ) , เรียงความเกณฑ์
รายการ ( ECC ) และแบบประเมินบทความ ( esas ) และหารือระดับ
ความน่าเชื่อถือ
วิธีเชิงปริมาณและเชิงคุณภาพ ข้อมูลที่ใช้นำเสนอ
และผลกระทบต่อความน่าเชื่อถือของการจัดอันดับและความสอดคล้องของ
การวัดผลลัพธ์ เครื่องมือที่ใช้ประเมิน 44 EFL
นักศึกษา 10 นักเรียนและประเมินความสามารถในการเขียนเรียงความของนักเรียนโดยใช้
คิม , ฯลฯ และ esas ในโอกาสที่แตกต่างกัน .
พบและผลลัพธ์ :ข้อมูลและผลจากการวิเคราะห์ พบว่า การใช้เครื่องหมาย
ความประทับใจทั่วไปคือไม่เด่นชัดที่เชื่อถือได้สำหรับการประเมิน
บทความ ค่าสัมประสิทธิ์ที่ได้จากรายการและระดับการประเมิน
พิจารณาสัมประสิทธิ์สหสัมพันธ์ , ประมาณองค์ประกอบความแปรปรวนและสัมประสิทธิ์ 1 นำเสนอข้อมูลที่มีค่า

, แสดงให้เห็นชัดเจนว่ามีเสมอรูปแบบของผลลัพธ์