IV. GESTURE GENERATIONWe implemente

IV. GESTURE GENERATION
We implemented an automatic gesture generation mechanism
in a virtual agent system. We created a gesture dictionary that
defines the typical shape and size of each object word. The
shape was automatically assigned using the method proposed
in Section III. The size parameter was manually assigned
using a scale from 1 to 5. For example, scale parameter 3
(middle) was assigned to basketball, and the scale for a sponge
ball was set to 1 (small). In addition, three types of iconic
gesture animations: drawing a circle, a rectangle and a straight
line, were pre-defined. We used Unity as the animation engine
(Fig. 2). The gesture generation process flow is described as
follows.
(1) When a sentence is input by the user, a morphological
analyzer detects nouns. For each noun, the system refers to the
gesture dictionary. If a noun matches a dictionary entry, the
gesture shape and the scale are determined based on the shape
and size parameters. Then, this information, together with the
sentence, is sent to the agent module.
(2) The agent module has a text-to-speech function that used
Microsoft Speech API (SAPI) and can generate lip sync
animation. This module selects agent gesture animations
according to the gesture shape and the scale specified above.
The module also determines the animation time schedule
including gestures and visemes for lip sync. Thus, the system
allows our virtual agent to speak a sentence with lip sync and
appropriate gestures at proper timing

ผลลัพธ์ (ไทย) 1:

IV. ท่าสร้างเราใช้กลไกการสร้างรูปแบบอัตโนมัติในระบบตัวแทนเสมือน เราสร้างพจนานุกรมท่าทางที่กำหนดรูปร่างโดยทั่วไปและขนาดของวัตถุแต่ละคำ การรูปร่างถูกกำหนดโดยอัตโนมัติโดยใช้วิธีการนำเสนอในส่วนที่สาม ด้วยตนเองกำหนดพารามิเตอร์ขนาดใช้สเกลจาก 1 ถึง 5 ตัวอย่างเช่น พารามิเตอร์ขนาด 3(กลาง) ถูกกำหนดให้กับบาสเกตบอล และขนาดสำหรับฟองน้ำลูกถูกกำหนดเป็น 1 (เล็ก) นอกจากนี้ สามชนิดเป็นสัญลักษณ์ท่าทางเคลื่อนไหว: วาดวงกลม สี่เหลี่ยม และตรงบรรทัด กำหนดไว้ล่วงหน้า เราใช้ความสามัคคีเป็นโปรแกรมภาพเคลื่อนไหว(2 รูป) อธิบายการไหลของกระบวนการสร้างท่าทางเป็นต่อไปนี้(1) เมื่อประโยคถูกป้อน โดยผู้ใช้ มีสัณฐานวิเคราะห์ตรวจพบคำนาม สำหรับแต่ละนาม ระบบหมายถึงการท่าทางพจนานุกรม ถ้าคำนามตรงกับรายการพจนานุกรม การท่าทางรูปร่างและขนาดที่กำหนดตามรูปร่างและพารามิเตอร์ขนาด แล้ว ข้อมูลนี้ เมื่อรวมกับการประโยค ส่งไปโมแทน(2) ตัวแทนโมดูมีฟังก์ชั่นแปลงที่ใช้Microsoft พูด API (SAPI) และสามารถสร้างริมฝีปากซิงค์ภาพเคลื่อนไหว โมดูลนี้เลือกภาพเคลื่อนไหวท่าทางแทนตามรูปร่างท่าทางและขนาดที่ระบุไว้ข้างต้นโมยังกำหนดตารางเวลาการเคลื่อนไหวรวมทั้งรูปแบบและ visemes สำหรับริมฝีปากซิงค์ ดังนั้น ระบบให้ตัวแทนของเราเสมือนพูดประโยค ด้วย lip sync และท่าทางที่เหมาะสมที่เวลาเหมาะสม

ผลลัพธ์ (ไทย) 2:

IV ท่าทาง GENERATION
เรานำมาใช้เป็นกลไกอัตโนมัติรุ่นท่าทาง
ในระบบเสมือนตัวแทน เราได้สร้างพจนานุกรมท่าทางที่
กำหนดรูปร่างปกติและขนาดของวัตถุแต่ละคำ
รูปร่างที่ได้รับมอบหมายโดยอัตโนมัติโดยใช้วิธีการที่นำเสนอ
ในส่วนที่สาม พารามิเตอร์ขนาดที่ได้รับมอบหมายด้วยตนเอง
โดยใช้ระดับ 1 ถึง 5 ตัวอย่างเช่นพารามิเตอร์ขนาด 3
(กลาง) ได้รับมอบหมายให้บาสเกตบอลและขนาดสำหรับฟองน้ำ
ลูกถูกตั้งค่าเป็น 1 (เล็ก) นอกจากนี้สามประเภทของสัญลักษณ์
ภาพเคลื่อนไหวท่าทาง: การวาดภาพวงกลมสี่เหลี่ยมและตรง
บรรทัดถูกกำหนดไว้ล่วงหน้า เราใช้ความสามัคคีเป็นเครื่องมือการเคลื่อนไหว
(รูปที่. 2) การไหลของกระบวนการสร้างท่าทางจะอธิบายว่า
ต่อไปนี้.
(1) เมื่อประโยคคือการป้อนข้อมูลโดยผู้ใช้ที่มีลักษณะทางสัณฐานวิทยา
วิเคราะห์ตรวจพบคำนาม สำหรับแต่ละคำนามระบบหมายถึง
พจนานุกรมท่าทาง ถ้าคำนามตรงกับรายการพจนานุกรมที่
รูปร่างท่าทางและขนาดจะถูกกำหนดขึ้นอยู่กับรูปร่าง
และขนาดพารามิเตอร์ จากนั้นข้อมูลเหล่านี้ร่วมกับ
ประโยคที่จะถูกส่งไปยังโมดูลตัวแทน.
(2) ตัวแทนโมดูลที่มีฟังก์ชั่นการแปลงข้อความเป็นคำพูดที่ใช้
Microsoft Speech API (SAPI) และสามารถสร้างลิปซิงค์
นิเมชั่น โมดูลนี้จะเลือกภาพเคลื่อนไหวท่าทางตัวแทน
ตามรูปร่างท่าทางและขนาดที่ระบุไว้ข้างต้น.
โมดูลยังกำหนดตารางเวลาภาพเคลื่อนไหว
รวมทั้งท่าทางและ visemes สำหรับลิปซิงค์ ดังนั้นระบบ
ช่วยเสมือนตัวแทนของเราที่จะพูดประโยคที่มีการลิปซิงค์และ
ท่าทางที่เหมาะสมในระยะเวลาที่เหมาะสม

ผลลัพธ์ (ไทย) 3:

ท่าทางรุ่น IVเราใช้กลไกอัตโนมัติรุ่น )ในระบบตัวแทน เป็นเสมือน ท่าทางที่เราสร้างพจนานุกรมกำหนดรูปร่างและขนาดของวัตถุโดยทั่วไปแต่ละคำ ที่รูปร่างโดยอัตโนมัติให้ใช้วิธีเสนอในส่วนที่ III ขนาดพารามิเตอร์ของตนเองได้รับมอบหมายการใช้เครื่องชั่ง จาก 1 ถึง 5 ตัวอย่าง พารามิเตอร์แสดงสเกล 3( กลาง ) ได้รับมอบหมายให้บาสเกตบอล และมาตราส่วนสำหรับฟองน้ำบอลชุด 1 ( ขนาดเล็ก ) นอกจากนี้สามชนิดของสัญลักษณ์รูปแบบภาพเคลื่อนไหว : วาดรูป วงกลม สี่เหลี่ยม และ แบบตรงๆบรรทัดจำนวนที่กำหนดไว้ล่วงหน้า เราใช้ความสามัคคีเป็นภาพเคลื่อนไหวเครื่องยนต์( รูปที่ 2 ) ท่าทางการสร้างการไหลของกระบวนการอธิบายเป็นดังนี้( 1 ) เมื่อประโยคถูกป้อนโดยผู้ใช้ เป็นลักษณะเครื่องตรวจจับคำนาม สำหรับแต่ละนาม ระบบ หมาย ถึงท่าทางพจนานุกรม ถ้าคำนามตรงกับพจนานุกรมรายการ ,รูปร่างท่าทาง และขนาด ได้ตามรูปร่างและพารามิเตอร์ขนาด แล้ว ข้อมูลนี้ ร่วมกับประโยคที่ถูกส่งไปยังตัวแทนของโมดูล( 2 ) ตัวแทนโมดูลมีข้อความที่จะพูดฟังก์ชั่นที่ใช้พูดของ Microsoft API ( sapi ) และสามารถสร้างลิปซิงค์ภาพเคลื่อนไหว โมดูลนี้จะเลือกตัวแทนรูปแบบภาพเคลื่อนไหวตามท่าทาง รูปร่าง และขนาดที่ระบุไว้ข้างต้นโมดูลยังกำหนดภาพเคลื่อนไหวตารางเวลาทั้งท่าทางและ visemes สำหรับลิปซิงค์ ดังนั้น ระบบช่วยให้ตัวแทนเสมือนของเราที่จะพูดประโยคกับลิปซิงค์ และท่าทางที่เหมาะสมในช่วงเวลาที่เหมาะสม