Dr. Fred Davidson (University of Il

Dr. Fred Davidson (University of Illinois, U.S.A.)
Language Assessment: a Specification-Driven Approach

A test specification is a blueprint-like document from which many equivalent test tasks can be produced. It links test items (i.e., questions), prompts, and rating systems to theory, to curricula, and to inevitable practical constraints.

In the opening lecture, we explore the central role of test specifications ('specs'), including their conceptual history and position in the philosophy of educational and psychological measurement. This includes critical analysis of some example specs. In the balance of the course, we create and revise test specs in much greater detail. Credit students will then complete a final project in which they design and critique a test spec on their own. One goal is to exit the course with a packet of test blueprints in an early version, awaiting further trialing and refinement. A more important goal is to exit with critical skills to write test specs in students' own language education settings and thus improve the validity arguments of their assessments.

For example, if the scoring descriptors for a writing exam mention "plausible" supports for a thesis statement, it is common to critically reflect on what "plausible" means. However, it is much better if a consensus definition can be recorded for the creation of future prompts, for teachers who prepare students for the test, for students who take it, and for other stakeholders. That is what specs do, and in so doing, it is how they contribute to meaningful score inferences and help build stronger validity arguments.

ผลลัพธ์ (ไทย) 1:

ดร. Fred Davidson (มหาวิทยาลัยอิลลินอยส์ สหรัฐอเมริกา)การประเมินภาษา: ซึ่งกำหนดวิธีการข้อมูลจำเพาะทดสอบเป็นเหมือนพิมพ์เขียวเอกสารซึ่งสามารถผลิตได้หลายการทดสอบเทียบเท่างาน มันลิงค์ทดสอบรายการ (เช่น คำถาม), แนะนำ และระบบการจัดอันดับ เพื่อทฤษฎี หลักสูตร และข้อจำกัดทางปฏิบัติที่หลีกเลี่ยงไม่ในการบรรยายเปิด เราสำรวจบทบาทศูนย์กลางของข้อมูลจำเพาะทดสอบ ('รายละเอียด'), รวมถึงประวัติแนวคิดและตำแหน่งในปรัชญาของการศึกษา และจิตวิทยาการวัด ซึ่งรวมถึงการวิเคราะห์รายละเอียดบางอย่างที่สำคัญ ในยอดของหลักสูตร เราสร้าง และแก้ไขรายละเอียดทดสอบละเอียดมาก เครดิตนักเรียนแล้วจะทำโครงการสุดท้ายที่พวกเขาออก และวิจารณ์ภาพทดสอบตนเอง เป้าหมายหนึ่งคือการ ออกจากหลักสูตรที่ มีแพคเก็ตของพิมพ์เขียวทดสอบในเวอร์ชันก่อน รอ trialing เพิ่มเติมและการปรับแต่ง เป้าหมายสำคัญคือการ ออก มีทักษะสำคัญในการเขียนรายละเอียดการทดสอบในภาษาของนักศึกษาการตั้งค่า และช่วย เพิ่มอาร์กิวเมนต์ถูกต้องของการประเมินผลการเช่น ถ้าตัวบอกเกณฑ์การให้คะแนนสำหรับการสอบเขียนพูดถึง "ปริมาณ" สนับสนุนสำหรับรายงานวิทยานิพนธ์ เป็นธรรมดาที่จะสะท้อนถึงสิ่งที่หมายถึง "ปริมาณ" อย่างไรก็ตาม มันจะดีถ้าสามารถบันทึกนิยามมติสร้างพร้อมท์ในอนาคต สำหรับครูที่เตรียมนักเรียน สำหรับการทดสอบ สำหรับผู้ที่ใช้มัน และส่วนได้เสีย เป็นที่สเปคทำอะไร และ ทำเป็นวิธีจะส่งผลให้คะแนนมีความหมาย inferences และช่วยสร้างอาร์กิวเมนต์ถูกต้องมากขึ้น

ผลลัพธ์ (ไทย) 2:

ดร. เฟร็ดเดวิดสัน (มหาวิทยาลัยอิลลินอยส์, สหรัฐอเมริกา)
ภาษาประเมิน: วิธีการจำเพาะขับเคลื่อนข้อกำหนดการทดสอบเป็นเอกสารพิมพ์เขียวเหมือนที่หลายงานทดสอบเทียบเท่าสามารถผลิตได้ มันเชื่อมโยงรายการทดสอบ (เช่นคำถาม) แจ้งและระบบการให้คะแนนทฤษฎีการหลักสูตรและข้อ จำกัด ในทางปฏิบัติหลีกเลี่ยงไม่ได้. ในการบรรยายเปิดเราจะสำรวจบทบาทสำคัญของรายละเอียดการทดสอบ ( 'รายละเอียด') รวมถึงประวัติความคิดของพวกเขา และตำแหน่งในปรัชญาของการวัดการศึกษาและจิตวิทยา ซึ่งรวมถึงการวิเคราะห์ความสำคัญของบางส่วนรายละเอียดตัวอย่างเช่น ในความสมดุลของการเรียนการสอนที่เราสร้างและแก้ไขรายละเอียดการทดสอบในรายละเอียดมากขึ้น นักเรียนเครดิตแล้วจะดำเนินการโครงการสุดท้ายที่พวกเขาออกแบบและข้อมูลจำเพาะวิจารณ์การทดสอบด้วยตัวเอง เป้าหมายหนึ่งคือการออกจากการเรียนการสอนที่มีแพ็คเก็ตของพิมพ์เขียวการทดสอบในรุ่นแรกรอต่อไป trialing และการปรับแต่ง เป้าหมายที่สำคัญมากขึ้นคือการออกจากที่มีทักษะที่สำคัญในการเขียนรายละเอียดการทดสอบในการตั้งค่าการศึกษาภาษาของนักเรียนและทำให้การปรับปรุงข้อโต้แย้งความถูกต้องของการประเมินผลของพวกเขา. ตัวอย่างเช่นถ้าอธิบายให้คะแนนสำหรับการกล่าวถึงการเขียนสอบ "เป็นไปได้" สนับสนุนสำหรับวิทยานิพนธ์ งบมันเป็นเรื่องธรรมดาที่จะวิกฤตสะท้อนสิ่งที่ "เป็นไปได้" หมายถึง แต่ก็เป็นสิ่งที่ดีมากถ้านิยามความเห็นเป็นเอกฉันท์สามารถบันทึกสำหรับการสร้างระบบแจ้งในอนาคตสำหรับครูที่เตรียมนักเรียนสำหรับการทดสอบสำหรับนักเรียนที่จะเอามันและผู้มีส่วนได้เสียอื่น ๆ นั่นคือสิ่งที่รายละเอียดที่ทำและทำเพื่อมันเป็นวิธีที่พวกเขามีส่วนร่วมในการหาข้อสรุปคะแนนที่มีความหมายและช่วยสร้างข้อโต้แย้งความถูกต้องแข็งแกร่ง

ผลลัพธ์ (ไทย) 3:

ดร. เฟรด เดวิดสัน ( มหาวิทยาลัยอิลลินอยส์ ประเทศสหรัฐอเมริกาการประเมินภาษา : กำหนดแนวทางขับเคลื่อนการทดสอบคุณสมบัติเป็นพิมพ์เขียว เช่น เอกสารจากที่งานทดสอบเทียบเท่าจำนวนมากสามารถผลิต มันการเชื่อมโยงรายการทดสอบ ( เช่นคำถาม ) , แจ้งและการประเมินระบบ ทฤษฎี กับหลักสูตร และหลีกเลี่ยงไม่ได้ ประโยชน์ ข้อจำกัดในการบรรยายเปิด เราสำรวจบทบาทของข้อมูลทดสอบ ( 'specs ' ) รวมทั้งประวัติและแนวคิดของตำแหน่งในปรัชญาของการวัดผลการศึกษาและจิตวิทยา นี้รวมถึงการวิเคราะห์รายละเอียดบางอย่างเช่น ในความสมดุลของหลักสูตรเราสร้างและแก้ไขรายละเอียดการทดสอบในรายละเอียดมากขึ้น นักศึกษาสินเชื่อจะแล้วเสร็จสุดท้าย โครงการที่พวกเขาออกแบบและวิจารณ์ทดสอบสเป็คของตนเอง หนึ่งในเป้าหมายคือทางออกแน่นอนกับแพ็คเก็ตของแบบทดสอบในรุ่นแรก รอ - เพิ่มเติม และการปรับแต่ง เป้าหมายสำคัญคือการออกจากที่มีทักษะที่สำคัญที่จะเขียนรายละเอียดการทดสอบนิสิตเองภาษาการศึกษาการตั้งค่า และดังนั้นจึง ปรับปรุงความถูกต้องของข้อโต้แย้งของการประเมินตนเองตัวอย่างเช่น ถ้าคะแนนในที่ข้อเขียนกล่าวถึง " สัมพันธ์ " เพื่อสนับสนุนวิทยานิพนธ์ งบ มันเป็นเรื่องธรรมดาที่จะประมวล สะท้อนว่า " เหตุผล " หมายถึง แต่มันจะดีกว่ามากถ้าฉันทามตินิยามสามารถบันทึกการแจ้งต่อไป สำหรับครูที่เตรียมนักเรียนสำหรับการสอบ สำหรับนักเรียนที่ใช้ และผู้มีส่วนได้เสียอื่น ๆ นั่นคือรายละเอียดที่ทำ ดังนั้นในการทำมันเป็นวิธีที่พวกเขาส่งผลให้คะแนนใช้ความหมาย และช่วยสร้างแข็งแกร่งเชิงเหตุผล