The data was collected during a five-day intensive TOEIC grammar and reading review session held in February of 2011. The textbook used for this intensive course is 新TOEIC TEST特訓リーディング: Reading Practice for the TOEIC Test (Essence English School, 2007). This book contains two sets of Parts 5, 6, and 7 practice questions as well as their answers and answer explanations in Japanese. At the beginning of the intensive session, a pre-test was administered, followed by a post-test at the end. This study analyses the results of the Part 5 questions of the pre-test and the post-tests. The analysis here is limited to
the Part 5 questions due to the following reasons:
1. Because of the length of the reading sections of TOEIC, most low-level students run out of time and cannot complete all test questions. They often fill out the bubbles on some Part 7 questions without even reading texts or questions; therefore, even though it looks like they have answered all the questions on the surface, the validity of their“ reading comprehension” is difficult to measure.
2. Because this intensive course is such a short-term course, assessing the improvement of students’ reading ability over a period of five days seems unrealistic and problematic for research purposes.
Part 5 questions, on the other hand, eliminate these problems because most students answer the Part5 grammar questions first, and they usually do not“ just fill out the bubbles” on this part. The assessment of grammar review is more reliable because the students’ learning of grammar rules and their ability to apply what they have learned is pertinent even in a short-term review course. Therefore, even though the students worked on all three sections of the TOEIC reading parts (Parts 5, 6, and 7) during the intensive course, this study only examines the Part 5 results.
Because this is an intensive course designed to help students who need to earn more credits to keep up with their expected academic progress, the students enrolled in this course tend to be weaker than the average English Communication majors in the Department.*1
Although 27 students were enrolled in the course, only 15 of them participated in all the components necessary for the analysis of this study (i. e., pre-test, review sessions, two timed practice tests, and post-test) due to various reasons (e. g., absences due to jobhunting activities and illness). Therefore, this study looks at the results of the pre-test and the post-test of those 15 students. Familiarity with the test format, what Schmidt (2003) calls “test wiseness,” is not an issue here because all English Communication majors are required to take the IP TOEIC tests twice a year, and all 15 students participating in the study have the experiences of taking TOEIC tests multiple times in the past.
In this study, the term“repetition” is used to refer to repetitive reviewing of the practice test grammar questions. This includes studying and reviewing the same questions multiple times as well as reading and repeating the questions with the correct answers multiple times. The students studied the two practice tests in the following steps.
1. At the beginning of the session, the students worked on 20 questions from Parts 5, 6, and 7 for 15 minutes. Some of the students’ concerns was that they could not complete all 100 grammar and reading questions in 75 minutes. Thus, the 100 questions were divided into 5 portions, and the students were instructed to pay attention to“ timing” and to try to complete the 20 questions in 15 minutes. When the 15 minutes was up, those students who completed all questions made a vocabulary list and studied the vocabulary. The students who could not finish the 20 questions in 15 minutes continued to complete all the questions first, then they also worked on vocabulary.
2. Upon completion of all questions and a vocabulary check, the instructor went over each question and explained the answers and grammar points in English, following the curriculum policy of “instruction in the target language only.”
3. For Part 5, the instructor read the questions with the correct answers, and the students repeated and practiced choral reading.
4. The students practiced pair reading of the same questions/answers.
5. Upon completion of all 100 practice test questions (=20 questions x 5 times) by repeating the above steps 1 - 4, the students worked on the same 100 questions one more time in a timed practice test fashion. New copies of the practice test were provided for this task. The students checked their answers and went over the questions and answers using the textbook, which provides grammar explanations in Japanese. The students repeated the same steps 1 -5 for the second set of practice tests.
At the beginning of the intensive course, the students took a pre-test, and a post-test was given at the end of the course. The pre-test and the post-test followed the TOEIC reading test format, consisting of 40 Part 5 questions, 12 part 6 questions, and 48 Part 7 questions. In each part, 50% of the test questions came from the textbook used in the course ( “repeated questions” hereafter), and the other 50% came from another source ( “new questions” hereafter). The repeated questions and the new questions were mixed so that the students would be forced to read the questions more carefully. Due to the time constraint and various
other factors of the intensive course, test time was modified to 70 minutes unlike the 75 minutes of the actual TOEIC reading section, and the students were told to complete as many questions as they could in 70 minutes.
The same questions were used for both the pre-test and the post-test. Some listening research takes the position that using the same test does not affect the end result if correct answers are not given to the students at any time and there is a suitable time interval between the initial and later tests (Takahahi, Suzuki, & Takefuta, 2003). Even though the tests used here were not listening tests and the students studied 50% of the test questions in the review sessions, the same questions were used for the post-test for the following reasons:
1. Regarding the repeated questions: After studying the questions in the textbook multiple times in the review sessions, the students had an average 57.2% accuracy rate (Practice Test 1=56.9%; Practice Test 2=57.4%) on the timed practice tests. Because the accuracy rate of the repeated questions was not high even after the repetitive reviews, recasting the same questions on the post-test seemed to be reasonable for the investigation of how well they could retain the materials and to examine how repetition practice to review grammar points affects their learning.
2. Regarding the new questions: Because the students did not study the new questions during the intensive course, the same questions were recast in the post-test to examine if the students were able to apply their knowledge gained in the review sessions to these questions the second time around. Thus, the same test was used for both the pre-test and the post-test to investigate both the students’ retention of the reviewed questions and application of grammar rules to new questions.
Additionally, the 15 students’ past TOEIC scores were obtained in order to provide a reference criterion. Their scores came from each student’s three most recent IP TOEIC scores available at the time of data analyses (i. e., the IP TOEICs held in December 2009, June 2010, and December 2010 at NUCB). For those students who took all three tests, their average scores were calculated based on the three test results; for those who only took two out of the three tests, their scores were based on the two test results instead of the three.
No statistical significances are investigated or claimed in this study because of its small sample size.
ข้อมูลที่ถูกเก็บรวบรวมในระหว่างห้าวันมากไวยากรณ์ TOEIC และการอ่านเซสชั่นการตรวจสอบที่จัดขึ้นในเดือนกุมภาพันธ์ของปี 2011 ตำราเรียนที่ใช้สำหรับหลักสูตรนี้เป็น新สอบ TOEIC特訓リーディング: การอ่านการปฏิบัติสำหรับข้อสอบ TOEIC (Essence โรงเรียนสอนภาษาอังกฤษ 2007) หนังสือเล่มนี้มีสองชุดอะไหล่ 5, 6, และ 7 คำถามที่ปฏิบัติเช่นเดียวกับคำตอบของพวกเขาและคำอธิบายคำตอบในภาษาญี่ปุ่น ในตอนต้นของเซสชั่นที่เข้มข้น, ทดสอบก่อนเป็นยาตามหลังการทดสอบในตอนท้าย การศึกษาครั้งนี้ผลการวิเคราะห์ของส่วนที่ 5 คำถามของการทดสอบก่อนและหลังการทดสอบ การวิเคราะห์ที่นี่จะถูก จำกัด
ส่วนที่ 5 คำถามเนื่องจากเหตุผลต่อไปนี้:
1 เพราะความยาวของส่วนการอ่านของ TOEIC, นักเรียนในระดับต่ำที่สุดหมดเวลาและไม่สามารถดำเนินการทดสอบคำถามทั้งหมด พวกเขามักจะกรอกฟองอากาศในบางส่วนที่ 7 คำถามโดยไม่ได้อ่านตำราหรือคำถาม; ดังนั้นแม้ว่ามันจะดูเหมือนว่าพวกเขาได้ตอบคำถามทั้งหมดที่อยู่ในพื้นผิวที่ถูกต้องของ "เข้าใจในการอ่าน" ของพวกเขาเป็นเรื่องยากที่จะวัด.
2 เพราะหลักสูตรนี้เป็นเช่นหลักสูตรระยะสั้นการประเมินการปรับปรุงความสามารถในการอ่านของนักเรียนในช่วงห้าวันดูเหมือนว่าไม่สมจริงและมีปัญหาเพื่อการวิจัย.
ส่วนที่ 5 คำถามในมืออื่น ๆ , ขจัดปัญหาเหล่านี้เพราะนักเรียนส่วนใหญ่ตอบ คำถามเล่ม 5 ไวยากรณ์แรกและพวกเขามักจะไม่ได้ "เพียงแค่กรอกฟอง" ในส่วนนี้ การประเมินการตรวจสอบไวยากรณ์มีความน่าเชื่อถือมากขึ้นเพราะการเรียนรู้ของนักเรียนกฎไวยากรณ์และความสามารถของพวกเขาที่จะใช้สิ่งที่พวกเขาได้เรียนรู้เป็นที่เกี่ยวข้องแม้จะอยู่ในหลักสูตรการตรวจสอบระยะสั้น ดังนั้นแม้ว่านักเรียนทำงานในทุกสามส่วนของชิ้นส่วนการอ่าน TOEIC (อะไหล่ 5, 6, และ 7) ในระหว่างหลักสูตรการศึกษาครั้งนี้เท่านั้นตรวจสอบส่วนที่ 5 ผล.
เพราะนี่คือหลักสูตรการออกแบบมาเพื่อช่วยให้นักเรียนที่ จำเป็นต้องได้รับเครดิตมากขึ้นเพื่อให้ทันกับความก้าวหน้าทางวิชาการคาดว่านักเรียนที่ลงทะเบียนเรียนในหลักสูตรนี้มีแนวโน้มที่จะปรับตัวลดลงกว่าวิชาเอกการสื่อสารภาษาอังกฤษโดยเฉลี่ยในภาควิชา. * 1
แม้ว่านักเรียนจำนวน 27 คนได้รับการคัดเลือกในการเรียนการสอนเพียง 15 ของพวกเขามีส่วนร่วม ส่วนประกอบทั้งหมดที่จำเป็นสำหรับการวิเคราะห์ของการศึกษานี้ (เช่นการทดสอบก่อนการประชุมทบทวนการทดสอบการปฏิบัติสองหมดเวลาและหลังการทดสอบ) เนื่องจากเหตุผลต่างๆ (เช่นขาดเนื่องจากกิจกรรม jobhunting และความเจ็บป่วย) ดังนั้นการศึกษานี้มีลักษณะที่ผลของการทดสอบก่อนและหลังการทดสอบของบรรดา 15 คน ความคุ้นเคยกับรูปแบบการทดสอบสิ่งที่ชมิดท์ (2003) เรียกว่า "wiseness ทดสอบ" ไม่ได้เป็นปัญหาที่นี่เพราะทุกวิชาเอกการสื่อสารภาษาอังกฤษจะต้องใช้เวลาทดสอบไอพี TOEIC ปีละสองครั้งและทั้งหมด 15 คนมีส่วนร่วมในการศึกษามีประสบการณ์ ของการทดสอบการสอบ TOEIC หลายครั้งในอดีตที่ผ่านมา.
ในการศึกษานี้คำว่า "ทำซ้ำ" ถูกนำมาใช้ในการอ้างถึงการตรวจสอบซ้ำของการปฏิบัติคำถามไวยากรณ์การทดสอบ ซึ่งรวมถึงการศึกษาและทบทวนคำถามเดียวกันหลายครั้งเช่นเดียวกับการอ่านและการทำซ้ำคำถามกับคำตอบที่ถูกต้องหลายครั้ง นักเรียนศึกษาทั้งสองการทดสอบการปฏิบัติในขั้นตอนต่อไป.
1 ในตอนต้นของเซสชั่น, นักเรียนทำงานในวันที่ 20 คำถามจากอะไหล่ 5, 6, 7 และ 15 นาที บางส่วนของความกังวลของนักเรียนคือการที่พวกเขาไม่สามารถดำเนินการทั้งหมด 100 ไวยากรณ์และการอ่านคำถามใน 75 นาที ดังนั้น 100 คำถามที่ถูกแบ่งออกเป็น 5 ส่วนและนักศึกษาได้รับคำสั่งให้ความสนใจกับ "ระยะเวลา" และพยายามที่จะเสร็จ 20 คำถามใน 15 นาที เมื่อ 15 นาทีขึ้น, นักศึกษาที่เสร็จสมบูรณ์ทุกคำถามทำรายการคำศัพท์และศึกษาคำศัพท์ นักเรียนที่ไม่สามารถจบ 20 คำถามใน 15 นาทีอย่างต่อเนื่องที่จะเสร็จสมบูรณ์ทุกคำถามแรกแล้วพวกเขาก็ยังทำงานในคำศัพท์.
2 เมื่อเสร็จสิ้นการทุกคำถามและตรวจสอบคำศัพท์สอนเดินไปแต่ละคำถามและอธิบายคำตอบและหลักไวยากรณ์ภาษาอังกฤษตามนโยบายหลักสูตรของ "การเรียนการสอนในภาษาเป้าหมายเท่านั้น".
3 สำหรับส่วนที่ 5 สอนอ่านคำถามที่มีคำตอบที่ถูกและนักศึกษาซ้ำและได้รับการฝึกฝนการอ่านการร้องเพลง.
4 นักเรียนได้รับการฝึกฝนการอ่านคู่ของคำถามเดียวกัน / คำตอบ.
5 เมื่อเสร็จสิ้นจากทั้งหมด 100 คำถามทดสอบการปฏิบัติ (= 20 คำถาม x 5 ครั้ง) โดยการทำซ้ำขั้นตอนข้างต้น 1-4, นักเรียนทำงานใน 100 คำถามเดียวกันอีกครั้งหนึ่งในการปฏิบัติแฟชั่นหมดเวลาการทดสอบ สำเนาใหม่ของการทดสอบการปฏิบัติมีให้สำหรับงานนี้ นักเรียนตรวจสอบคำตอบของพวกเขาและเดินไปคำถามและคำตอบโดยใช้ตำราเรียนซึ่งมีคำอธิบายไวยากรณ์ในภาษาญี่ปุ่น นักเรียนทำซ้ำขั้นตอนเดียวกัน 1 -5 สำหรับชุดที่สองของการทดสอบการปฏิบัติ.
ในตอนต้นของหลักสูตรที่นักเรียนใช้เวลาทดสอบก่อนและหลังการทดสอบที่ได้รับในตอนท้ายของการเรียนการสอน ทดสอบก่อนและหลังการทดสอบตามอ่าน TOEIC รูปแบบการทดสอบประกอบด้วย 40 ส่วนที่ 5 คำถาม 12 คำถามส่วน 6 และ 48 ส่วนที่ 7 คำถาม ในแต่ละส่วน 50% ของคำถามทดสอบมาจากตำราที่ใช้ในการเรียนการสอน ("คำถามซ้ำ" ต่อจากนี้) และอีก 50% มาจากแหล่งอื่น ("คำถามใหม่" ต่อจากนี้) คำถามซ้ำและคำถามใหม่ที่ถูกนำมาผสมเพื่อให้นักเรียนจะถูกบังคับให้อ่านคำถามอย่างระมัดระวังมากขึ้น เนื่องจากข้อ จำกัด เวลาและต่าง ๆ
ปัจจัยอื่น ๆ ของหลักสูตร, เวลาในการทดสอบได้รับการแก้ไขเพื่อให้แตกต่างจาก 70 นาที 75 นาทีส่วนการอ่าน TOEIC ที่เกิดขึ้นจริงและนักศึกษาได้รับคำสั่งให้เสร็จสมบูรณ์คำถามให้มากที่สุดเท่าที่จะทำได้ใน 70 นาที.
คำถามเดียวกันถูกนำมาใช้ทั้งในการทดสอบก่อนและหลังการทดสอบ วิจัยบางฟังรับตำแหน่งว่าการใช้การทดสอบเดียวกันไม่ได้ส่งผลกระทบต่อผลสุดท้ายถ้าคำตอบที่ถูกต้องไม่ได้รับให้กับนักเรียนในเวลาใด ๆ และมีช่วงเวลาที่เหมาะสมระหว่างการทดสอบครั้งแรกและต่อมา (Takahahi ซูซูกิและ Takefuta, 2003) ถึงแม้ว่าการทดสอบใช้ที่นี่ไม่ได้ฟังการทดสอบและนักเรียนการศึกษา 50% ของคำถามทดสอบในการประชุมทบทวนคำถามเดียวกันกับที่ใช้ในการโพสต์การทดสอบด้วยเหตุผลต่อไปนี้:
1 เกี่ยวกับคำถามซ้ำ: หลังจากที่ได้ศึกษาคำถามในตำราหลายครั้งในการประชุมทบทวนนักเรียนมีค่าเฉลี่ยอัตราความถูกต้อง 57.2% (การทดสอบการปฏิบัติ 1 = 56.9% การทดสอบการปฏิบัติ 2 = 57.4%) ในการทดสอบการปฏิบัติเวลาที่กำหนด เพราะอัตราความถูกต้องของคำถามซ้ำไม่สูงแม้หลังจากที่ความคิดเห็นซ้ำ, แต่งคำถามเดียวกันในการโพสต์การทดสอบดูเหมือนจะเป็นที่เหมาะสมสำหรับการตรวจสอบของวิธีการที่ดีที่พวกเขาสามารถรักษาวัสดุและการตรวจสอบวิธีการปฏิบัติซ้ำเพื่อทบทวนไวยากรณ์ จุดที่มีผลกระทบต่อการเรียนรู้ของพวกเขา.
2 เกี่ยวกับคำถามใหม่: เพราะนักเรียนไม่ได้เรียนคำถามใหม่ในระหว่างหลักสูตร, คำถามเดียวกันถูกแต่งใหม่ในการโพสต์การทดสอบเพื่อตรวจสอบถ้านักเรียนมีความสามารถที่จะนำความรู้ที่ได้รับในการประชุมทบทวนคำถามเหล่านี้ที่สอง เวลาประมาณ ดังนั้นการทดสอบเดียวกันที่ใช้สำหรับทั้งการทดสอบก่อนและหลังการทดสอบการตรวจสอบทั้งของนักเรียนการเก็บรักษาของคำถามการตรวจสอบและการประยุกต์ใช้กฎไวยากรณ์คำถามใหม่.
นอกจากนี้ 15 คนคะแนนสอบ TOEIC ที่ผ่านมาที่ได้รับใน เพื่อที่จะให้เกณฑ์อ้างอิง คะแนนของพวกเขามาจากของนักเรียนแต่ละคนสามล่าสุดไอพี TOEIC คะแนนมีอยู่ในเวลาของการวิเคราะห์ข้อมูล (เช่นไอพี TOEICs จัดขึ้นในเดือนธันวาคม 2009 เดือนมิถุนายน 2010 และเดือนธันวาคม 2010 ที่ NUCB) สำหรับนักเรียนผู้ที่เข้ามาทดสอบทั้งสามคะแนนเฉลี่ยของพวกเขาจะถูกคำนวณขึ้นอยู่กับผลการทดสอบสาม; สำหรับผู้ที่ใช้เวลาเพียงสองในสามของการทดสอบคะแนนของพวกเขาอยู่บนพื้นฐานของผลการทดสอบสองแทนของทั้งสาม.
ไม่มีความสำคัญทางสถิติที่มีการตรวจสอบหรือการอ้างว่าในการศึกษาครั้งนี้เพราะขนาดของกลุ่มตัวอย่างขนาดเล็ก
การแปล กรุณารอสักครู่..