The potential of computer-based ass

The potential of computer-based assessments for capturing complex learning outcomes has been discussed; however, relatively little is understood about how to leverage such potential for summative and accountability purposes. The aim of this study is to develop and validate a multimedia-based assessment of scientific inquiry abilities (MASIA) to cover a more comprehensive construct of inquiry abilities and target secondary school students in different grades while this potential is leveraged. We implemented five steps derived from the construct modeling approach to design MASIA. During the implementation, multiple sources of evidence were collected in the steps of pilot testing and Rasch modeling to support the validity of MASIA. Particularly, through the participation of 1,066 8th and 11th graders, MASIA showed satisfactory psychometric properties to discriminate students with different levels of inquiry abilities in 101 items in 29 tasks when Rasch models were applied. Additionally, the Wright map indicated that MASIA offered accurate information about students’ inquiry abilities because of the comparability of the distributions of student abilities and item difficulties. The analysis results also suggested that MASIA offered precise measures of inquiry abilities when the components (questioning, experimenting, analyzing, and explaining) were regarded as a coherent construct. Finally, the increased mean difficulty thresholds of item responses along with three performance levels across all sub-abilities supported the alignment between our scoring rubrics and our inquiry framework. Together with other sources of validity in the pilot testing, the results offered evidence to support the validity of MASIA.

ผลลัพธ์ (ไทย) 1:

มีการกล่าวถึงศักยภาพของคอมพิวเตอร์ที่ใช้ประเมินสำหรับการจับภาพผลลัพธ์การเรียนรู้ที่ซับซ้อน อย่างไรก็ตาม ค่อนข้างน้อยคือเข้าใจเกี่ยวกับวิธีการใช้ประโยชน์จากศักยภาพดังกล่าว summative และวัตถุประสงค์ความรับผิดชอบ จุดมุ่งหมายของการศึกษานี้คือการ พัฒนา และตรวจสอบประเมินการใช้มัลติมีเดียของ scientific สอบถามเกี่ยวกับความสามารถ (เซีย) จะครอบคลุมโครงสร้างครอบคลุมมากขึ้นความสามารถสอบถามและเป้าหมายนักเรียนมัธยมเกรดแตกต่างกันในขณะที่ leveraged ศักยภาพนี้ เราดำเนินการขั้นตอน five ที่มาจากการสร้างแบบจำลองวิธีการออกแบบเซีย ในระหว่างการดำเนินการ หลายแหล่งหลักฐานถูกเก็บรวบรวมในขั้นตอนของการทดสอบนำร่องและ Rasch โมเดลการสนับสนุนมีผลบังคับใช้ของเซีย โดยเฉพาะ โดยมีส่วนร่วมของนักเรียน 8 และ 11 1,066 เซียพบคุณสมบัติ psychometric พอถือพรรคถือพวกนักเรียนที่ มีความสามารถสอบถามในรายการ 101 ใน 29 งานระดับต่าง ๆ เมื่อใช้รุ่น Rasch นอกจากนี้ แผนที่ไรท์ระบุว่า เซียเสนอรายละเอียดเกี่ยวกับความสามารถของนักเรียนที่สอบถาม เพราะความหมายของการกระจายของความสามารถของนักเรียนและรายการ difficulties ผลการวิเคราะห์ยังแนะนำว่า เซียเสนอวัดสอบถามความชัดเจนเมื่อคอมโพเนนต์ (จิตต ทดสอบ วิเคราะห์ และอธิบาย) ก็ถือเป็นสร้าง coherent สุดท้าย ขีดจำกัด difficulty เพิ่มหมายถึงสินค้าตอบสนองด้วย 3 ประสิทธิภาพระดับข้ามความสามารถย่อยทั้งหมดได้รับการสนับสนุนการจัดตำแหน่งระหว่าง rubrics คะแนนของเราและของเรากรอบสอบถาม กับแหล่งอื่น ๆ มีผลบังคับใช้ในนำร่องทดสอบ ผลการเสนอหลักฐานเพื่อสนับสนุนความของเซีย

ผลลัพธ์ (ไทย) 2:

การประเมินศักยภาพของคอมพิวเตอร์ที่ใช้สำหรับการจับผลการเรียนรู้ที่มีความซับซ้อนได้รับการกล่าวถึงนั้น แต่ค่อนข้างน้อยเป็นที่เข้าใจเกี่ยวกับวิธีการใช้ประโยชน์จากศักยภาพดังกล่าวเพื่อวัตถุประสงค์ปลายทางและความรับผิดชอบ จุดมุ่งหมายของการศึกษาครั้งนี้คือการพัฒนาและการตรวจสอบการประเมินมัลติมีเดียที่ใช้ในทางวิทยาศาสตร์ความสามารถสอบถามรายละเอียดเพิ่มเติมค (MASIA) เพื่อให้ครอบคลุมการสร้างที่ครอบคลุมมากขึ้นของความสามารถสอบถามรายละเอียดเพิ่มเติมและเป้าหมายนักเรียนระดับมัธยมศึกษาในระดับที่แตกต่างกันในขณะที่อาจเกิดขึ้นนี้จะถูกยกระดับ เราซึ่งสร้างไฟได้ตามขั้นตอนที่ได้มาจากการสร้างแบบจำลองวิธีการสร้างการออกแบบ MASIA ในระหว่างการดำเนินการหลายแหล่งที่มาของหลักฐานถูกเก็บไว้ในขั้นตอนของการทดสอบนักบินและ Rasch การสร้างแบบจำลองเพื่อสนับสนุนความถูกต้องของ MASIA โดยเฉพาะอย่างยิ่งผ่านการมีส่วนร่วมของ 1,066 คารม 8 และ 11 MASIA แสดงให้เห็นคุณสมบัติทางจิตวิทยาที่น่าพอใจในการแยกแยะนักเรียนที่มีระดับที่แตกต่างของความสามารถสอบถามรายละเอียดเพิ่มเติมใน 101 รายการในงานเมื่อวันที่ 29 รุ่น Rasch ถูกนำไปใช้ นอกจากนี้แผนที่ไรท์ระบุว่า MASIA เสนอข้อมูลที่ถูกต้องเกี่ยวกับนักเรียนความสามารถสอบถามรายละเอียดเพิ่มเติมเพราะการเปรียบเทียบของการกระจายของความสามารถของนักเรียนและรายการที่แตก culties Fi จะ ผลการวิเคราะห์ยังชี้ให้เห็นว่า MASIA เสนอมาตรการที่แม่นยำของความสามารถสอบถามรายละเอียดเพิ่มเติมเมื่อส่วนประกอบ (คำถามทดลองวิเคราะห์และอธิบาย) ถูกมองว่าเป็นโครงสร้างที่เชื่อมโยงกัน ในที่สุดเพิ่มขึ้นเฉลี่ยเกณฑ์ culty ไฟแตกของการตอบสนองรายการพร้อมกับสามระดับประสิทธิภาพในทุกความสามารถย่อยได้รับการสนับสนุนการจัดตำแหน่งระหว่างเกณฑ์การให้คะแนนของเราและกรอบสอบถามรายละเอียดเพิ่มเติมของเรา ร่วมกับแหล่งข้อมูลอื่น ๆ ของความถูกต้องในการทดสอบนำร่องผลที่นำเสนอหลักฐานที่จะสนับสนุนความถูกต้องของ MASIA