IT IS an idea any overworked teache

IT IS an idea any overworked teacher would welcome – computers that automatically mark piles of exams and homework. Tens of thousands of students around the US are already being evaluated by such systems. But can we trust the artificial intelligence that powers them to make appropriate judgements? Two new real-world tests suggest that it can work surprisingly well.

In one experiment, conducted at the University of Central Florida in Orlando between January and May this year, Pam Thomas tracked the impact of an automated grading system on the performance of the 1000 or so students in her first-year biology class.

The students answered questions using SAGrader, an online service developed by Idea Works of Columbia, Missouri. SAGrader parsed their answers, which could be several paragraphs long, using artificial intelligence techniques designed to extract meaning from text. For example, given the phrase “the heart pumps blood”, SA Grader would identify two entities in the text – “heart” and “blood” – and the relationship between them. These details were then analysed using a rubric compiled by Thomas.



She says her students like SAGrader because it provides feedback on their work in less than a minute. They can then resubmit their work, having taken the feedback into account, and may gain a higher score.

The software also had a fringe benefit. In end-of-term multiple-choice tests, the average mark scored by Thomas’s students was 12.5 per cent higher than in previous years. “We were amazed,” she says. She attributes the improvement to SAGrader encouraging students to work through problems multiple times. “It taught them how to think through the test questions

ผลลัพธ์ (ไทย) 1:

IT IS คิดใด ๆ ครู overworked จะยินดี – คอมพิวเตอร์ที่กองการสอบและการบ้านที่ทำเครื่องหมายโดยอัตโนมัติ กำลังประเมินนับหมื่นของนักศึกษาทั่วสหรัฐอเมริกา โดยระบบดังกล่าว แต่เราสามารถเชื่อปัญญาประดิษฐ์อำนาจที่พวกเขาต้อง judgements ที่เหมาะสม ทดสอบจริงใหม่สองแนะนำว่า มันสามารถทำงานน่าแปลกใจดีในการทดลองหนึ่ง ดำเนินการที่ในมหาวิทยาลัยฟลอริดากลางในออร์แลนโดระหว่างเดือนมกราคมและพฤษภาคมปีนี้ Thomas แพมติดตามผลกระทบของระบบการจัดเกรดแบบอัตโนมัติบนประสิทธิภาพของ 1000 หรือให้นักเรียนในชั้นเรียนวิชาชีววิทยาปีแรกของเธอนักเรียนตอบคำถามโดยใช้ SAGrader บริการออนไลน์ที่พัฒนา โดยคิดงานของโคลัมเบีย มิสซูรี SAGrader แยกวิเคราะห์คำตอบของพวกเขา ซึ่งอาจจะยาวหลายย่อหน้า ใช้เทคนิคของปัญญาประดิษฐ์ที่ออกแบบมาเพื่อแยกความหมายจากข้อความ ตัวอย่าง ให้วลี "หัวใจปั๊มเลือด" ประถม SA จะระบุสองเอนทิตีในข้อ – "หัวใจ" และ "เลือด" – และความสัมพันธ์ระหว่างพวกเขา รายละเอียดเหล่านี้ได้แล้ว analysed ใช้ rubric ในการคอมไพล์ โดย Thomasเธอกล่าวว่า เธอเรียนเช่น SAGrader เนื่องจากให้ผลตอบสนองต่อการทำงานในน้อยกว่าหนึ่งนาที พวกเขาสามารถส่งใหม่แล้วทำงาน มีคำนึงผลป้อนกลับ และอาจได้รับคะแนนสูงกว่านอกจากนี้ซอฟต์แวร์ยังมีสวัสดิการการ ในการสิ้นสุดของระยะทดสอบ multiple-choice หมายเฉลี่ยคะแนนนักเรียนของ Thomas ได้ 12.5 เปอร์เซ็นต์สูงกว่าในปีก่อนหน้านี้ "เราได้ประหลาดใจ เธอกล่าวว่า เธอคุณลักษณะการปรับปรุงเพื่อส่งเสริมให้นักเรียนทำงานผ่านปัญหาหลายครั้ง SAGrader "มันสอนให้พวกเขาวิธีการคิดคำถามทดสอบ

ผลลัพธ์ (ไทย) 2:

มันเป็นความคิดที่ครูทำงานหนักเกินไปจะต้อนรับ - คอมพิวเตอร์ที่ทำเครื่องหมายโดยอัตโนมัติกองการสอบและการบ้าน นับหมื่นของนักเรียนทั่วสหรัฐอเมริกาอยู่แล้วจะถูกประเมินโดยระบบดังกล่าว แต่เราสามารถไว้วางใจปัญญาประดิษฐ์ที่อำนาจพวกเขาที่จะทำให้การตัดสินใจที่เหมาะสม? สองการทดสอบที่แท้จริงของโลกใหม่ที่แสดงให้เห็นว่ามันสามารถทำงานตื่นตาตื่นใจดี. หนึ่งในการทดสอบดำเนินการที่มหาวิทยาลัยเซ็นทรัลฟลอริดาในออร์แลนโดระหว่างเดือนมกราคมและพฤษภาคมปีนี้แพมโทมัสการติดตามผลกระทบของระบบการจัดลำดับโดยอัตโนมัติในการปฏิบัติงานของ 1000 หรือเพื่อให้นักเรียนในชั้นเรียนวิชาชีววิทยาปีแรกของเธอ. นักเรียนตอบคำถามโดยใช้ SAGrader, บริการออนไลน์ที่พัฒนาโดยผลงานความคิดของโคลัมเบีย SAGrader แจงคำตอบของพวกเขาซึ่งอาจจะมีหลายย่อหน้ายาวโดยใช้เทคนิคปัญญาประดิษฐ์ออกแบบมาเพื่อดึงความหมายจากข้อความ ตัวอย่างเช่นกำหนดวลี "หัวใจปั๊มเลือด", SA Grader จะระบุทั้งสองหน่วยงานในข้อความ - "หัวใจ" และ "เลือด" - และความสัมพันธ์ระหว่างพวกเขา รายละเอียดเหล่านี้ถูกวิเคราะห์โดยใช้เกณฑ์การรวบรวมโดยโทมัส. เธอบอกว่านักเรียนของเธอเช่น SAGrader เพราะมันให้ความคิดเห็นเกี่ยวกับการทำงานของพวกเขาในเวลาที่น้อยกว่าหนึ่งนาที พวกเขาก็สามารถส่งงานของพวกเขาต้องเอาข้อเสนอแนะเข้าบัญชีและอาจได้รับคะแนนที่สูงขึ้น. ซอฟแวร์ยังมีผลประโยชน์สวัสดิการ ในท้ายของระยะการทดสอบแบบปรนัยเครื่องหมายเฉลี่ยคะแนนโดยนักเรียนของโทมัสเป็นร้อยละ 12.5 สูงกว่าในปีก่อนหน้า "เรามีความประหลาดใจ" เธอกล่าว เธอคุณลักษณะการปรับปรุง SAGrader นักเรียนให้กำลังใจในการทำงานผ่านปัญหาหลายครั้ง "มันสอนให้รู้ว่าจะคิดว่าผ่านการทดสอบคำถาม

ผลลัพธ์ (ไทย) 3:

มันคือ ความคิดใด ๆ มาก ครูยินดีต้อนรับ–คอมพิวเตอร์โดยอัตโนมัติเครื่องหมายกองการสอบและการบ้าน นับหมื่นของนักเรียนรอบๆ เรากำลังถูกทดสอบโดยระบบ แต่เราสามารถไว้วางใจปัญญาประดิษฐ์ที่พลังพวกเขาเพื่อให้พิจารณาความเหมาะสม สองการทดสอบจริงใหม่แนะนำว่ามันสามารถทำงานได้ดีทีเดียว

ในหนึ่งการทดลองดำเนินการที่มหาวิทยาลัยเซ็นทรัลฟลอริดาออร์แลนโดระหว่างเดือนมกราคมและเดือนพฤษภาคมปีนี้ แพม โทมัส ติดตามผลกระทบของระบบคัดแยกอัตโนมัติ ในการปฏิบัติงานของนักศึกษาชั้นปีที่ 1 ใน 1000 หรือดังนั้นเธอห้องเรียนชีววิทยา

นักเรียนตอบคำถามโดยใช้ sagrader เป็นบริการออนไลน์ที่พัฒนาโดยคิดผลงานของโคลัมเบีย , มิสซูรี่ sagrader แจงคำตอบของพวกเขาซึ่งอาจเป็นย่อหน้ายาวหลาย การใช้เทคนิคปัญญาประดิษฐ์ที่ออกแบบมาเพื่อแยกความหมายจากข้อความ ตัวอย่างเช่น ให้คำว่า " เลือด " หัวใจสูบฉีด ซาปราบดินให้ราบจะระบุสององค์กรในข้อความ– " หัวใจ " และ " เลือด " ) และความสัมพันธ์ระหว่างพวกเขา รายละเอียดเหล่านี้แล้ววิเคราะห์ข้อมูลโดยใช้รูบริครวบรวมโดยโทมัส .



เธอบอกว่าเธอชอบ sagrader นักเรียนเพราะมีข้อเสนอแนะในการทำงานของพวกเขาในเวลาไม่ถึงนาที จากนั้นพวกเขาสามารถตรวจสอบการทํางานของพวกเขาได้รับความคิดเห็นลงในบัญชี และอาจได้คะแนนสูงกว่า

ซอฟต์แวร์ยังมีเงินสวัสดิการ ในตอนท้ายของแบบสอบเลือกตอบสั้น , เครื่องหมายเฉลี่ยคะแนนโดยนักเรียนของโทมัสคือ 12.5 เปอร์เซ็นต์สูงกว่าปีก่อนหน้านี้ . " เราประหลาดใจ ," เธอกล่าว เธอ sagrader คุณลักษณะการปรับปรุงเพื่อส่งเสริมให้นักเรียนทำงานผ่านปัญหาหลาย ๆ ครั้ง " มันสอนวิธีคิดผ่านคำถามทดสอบ