A new method, eye-movement-continge

A new method, eye-movement-contingent release of speech, was developed to study the use of sound codes during visual word recognition. This new method examines effects of spoken -rather then visual/orthographic- words on the concurrent recognition of visual words. Speech is to be presented while text are viewed and presentation of the speech signal is coordinated with the viewing of a preselected visual target word. During sentence reading, the reader's eye positions are continuously sampled, and a real time fixation detection algorithm is developed to present the auditory signal when a certain pre-specified eye position criterion (called boundary) is fulfilled. The auditory stimuli are presented from eye tracking data, that is, eye movement are contingent on the change of heard/seen stimuli, so that the location of the eye position during visual object perception is calculated relative to the auditory presentation of speech.

“SEE”-multi-modalities eye tracking system was developed to implement this new method. SEE system was mainly built on a fifth-generation Dual-Purkinje SRI eye tracker but also provides general API supports for use with other eye trackers (i.e. ICAN and SM systems). SEE software toolkit was installed on an IBM compatible personal computer, which was connected with the eye tracker through an Analogue-to-Digital converter.

ผลลัพธ์ (ไทย) 1:

วิธีการใหม่ ตาเคลื่อนไหวกองทัพปล่อยเสียง ได้รับการพัฒนาศึกษาใช้รหัสเสียงระหว่างการรับรู้ภาพคำ วิธีการใหม่นี้ตรวจสอบผลของพูด - ค่อนข้างแล้ว visual/orthographic-คำในเวลาเดียวกันของคำภาพ คำพูดจะแสดงข้อความที่ถูกแสดง และนำเสนอของสัญญาณเสียงจะประสานกับดูคำภาพเป้าหมายไว้ล่วงหน้า ระหว่างประโยคอ่าน ตำแหน่งตาของผู้อ่านได้อย่างต่อเนื่องตัวอย่าง และเป็นพัฒนาขั้นตอนวิธีการตรวจหาปฏิกิริยาการตรึงเวลาจริงเพื่อแสดงสัญญาณหูเมื่อดำเนินการบางตาล่วงหน้าระบุตำแหน่งเกณฑ์ (เรียกว่าขอบเขต) มีแสดงสิ่งเร้าหูจากตาติดตามข้อมูล คือ การเคลื่อนไหวของตาจะผูกพันกับการเปลี่ยนแปลงของการได้ยิน/เห็นสิ่งเร้า เพื่อให้มีคำนวณตำแหน่งของตำแหน่งตาในระหว่างการรับรู้ภาพวัตถุสัมพันธ์นำเสนอเสียงที่หู

"ดู" -หลาย-modalities ตาระบบติดตามได้รับการพัฒนาจะใช้วิธีการใหม่นี้ ดูระบบส่วนใหญ่สร้างขึ้นเป็นรุ่นที่ห้าเปอร์กินเจสองศรีตาตัวติดตาม แต่ยัง ให้สนับสนุน API ทั่วไปสำหรับใช้กับผู้ติดตามของตาอื่น ๆ (เช่น ICAN และ SM ระบบ) เห็นมีติดเครื่องมือซอฟต์แวร์ IBM เข้ากันได้กับคอมพิวเตอร์ส่วนบุคคล ซึ่งถูกเชื่อมต่อกับ tracker ตาผ่านการแปลงอนาล็อกกับดิจิตอล

ผลลัพธ์ (ไทย) 2:

ปลดล็อคตา - การเคลื่อนไหวที่อาจเกิดขึ้นวิธีใหม่ในการพูดเป็นสิ่งที่พัฒนาขึ้นมาเพื่อการศึกษาการใช้รหัสเสียงในระหว่างการยอมรับคำว่า ภาพ วิธีการใหม่นี้จะตรวจสอบผลของพูดถึง - มากแล้วด้าน ภาพ / orthographic - คำในการยอมรับงานพร้อมกันที่มีคำใดคำหนึ่ง ภาพสุนทรพจน์คือการได้รับการนำเสนอในขณะที่ข้อความจะแสดงผลและการนำเสนอของสัญญาณเสียงพูดจะประสานกันเป็นอย่างดีพร้อมด้วยการรับชมการของคำเป้าหมายด้านการแสดง ภาพ ที่เลือกไว้ล่วงหน้า ในระหว่างการอ่านประโยคตำแหน่งตาของผู้อ่านที่เป็นตัวอย่างอย่างต่อเนื่องอัลกอริธึมการตรวจจับและที่ยึดแบบเรียลไทม์ที่มีการพัฒนาการมีสัญญาณการฟัง,เมื่อเกณฑ์ตำแหน่งตาระบุไว้ล่วงหน้าบางอย่าง(เรียกว่าเขต)ได้รับการตอบสนอง มาตรการกระตุ้นการฟัง,ที่มีการแสดงจากข้อมูลการติดตามตาที่มีการเคลื่อนไหวตามีขึ้นอยู่กับการเปลี่ยนแปลงของได้ยินเสียง/เห็นมาตรการกระตุ้นดังนั้นว่าที่ตั้งของตำแหน่งตาในระหว่างการรับรู้วัตถุทางสายตาจะคำนวณเมื่อเทียบกับการนำเสนอล้ำสมัยของสุนทรพจน์.

"ดูระบบการตรวจสอบตา" - แบบมัลติ - รูปแบบได้รับการพัฒนาขึ้นเพื่อใช้วิธีการใหม่นี้ ดูที่ระบบสร้างขึ้นบน dual-purkinje ศรีช่วยตาที่ห้า - รุ่นใหม่แต่ยังให้การสนับสนุนโดยทั่วไปสำหรับการใช้ API ด้วย trackers ตาอื่นๆ(เช่นเป็นส่วนใหญ่ican และระบบจ.ส.ท.) โปรดดูเครื่องมือซอฟต์แวร์ได้รับการติดตั้งบนคอมพิวเตอร์ส่วนตัวสามารถใช้งานร่วมกับ IBM ที่ซึ่งมีการเชื่อมต่อกับเครื่องตรวจสอบผ่านตัวแปลงแบบอะนาล็อกเป็นดิจิตอลได้