be aligned with the shape rendering

be aligned with the shape rendering to provide the illusion
that the physical hands are coming out of the screen.
Switching between Representations. It may be advantageous
to switch between these representations. A tangible token,
e.g., could be represented by a remote tangible object, but
if the remote user does not have enough tokens a physical
rendering can be used instead (see Figure 3). Hands can be
represented as physical renderings when manipulating an object,
or as a virtual rendering when pointing or annotating (see
Figure 7). These state transitions are in part inspired by our
Sublimate concept [14].
PHYSICALLY MANIPULATING REMOTE OBJECTS
Prior work [7, 5] has shown how shape displays can be used
to manipulate physical objects, e.g., using translation and rotation.
Here, we explore different control schemes to allow a
user to manipulate remote objects. Using shape capture and
display, users can reach through the network and pick up a remote
physical object. These interaction techniques were developed
through iterative prototyping with our inFORM system.
Hundreds of visitors to our lab tried different techniques
to manipulate objects remotely, and their comments and our
observations lead us to develop and improve the following
techniques.
Gesture Control
Direct Gesture Control allows a user to interact directly with
a remote tangible object through transmitted physical embodiment,
which is rendered on the remote shape display. The
rendered shape of the user directly applies a force to objects
placed on the surface. For example, if the user forms a cup
with the hands and raises them, this will be rendered and the
pins could move a ball upwards. By observing the reaction of
the physical object to their transmitted gestures, users can improvise
to expressively manipulate a variety of objects. While
our shape displays currently apply vertical forces, objects can
still be translated laterally by tilting and sliding [7]. In addition
to users’ hands and arms, any object that is placed in
the shape capture area can be transmitted and used to manipulate
remote objects (see Figure 4). Because our shape
display, based on inFORM [7], can only render shapes 0-100
mm in height, there is a question of how to render the remote
environment, which most likely extends beyond 100 mm in
height. We explored two mappings: Scaled and 1:1 with gesture
zones. The scaled mapping takes all depth data and maps
its height values to the shape display’s maximum extent. The
second mapping, 1:1 with gesture zones, take some portion of
the input space that is the same height as the maximum height
travel and renders it on the shape display. This can be directly
Figure 5. Pushing against the side of a shape-rendered objects with the
brush tool moves it.
above the surface, or mid air, allowing users to touch the pin
array without manipulating remote objects. In our teleoperation
scenario we use a 1:1 mapping, with the gesture zone of
physical rendering starting right above the horizontal screen.
Mediated Gesture Control exploits that the remote object’s
pose is tracked and can be updated and moved to keep it
synchronized with its underlying digital model [7]. Physicsbased
Gestures detect the user’s collisions with the model,
to update and move it, using a physics library. The updated
model then causes the remote object to be physically moved.
This is similar to the proxy-based approach in HoloDesk [10],
but with actuated physical output. Iconic Gestures provide
users with more abstract control. The user can pinch over the
representation of the remote object to grab it, move their arm
to another location, and open the pinch gesture to release it.
The remote object is then actuated by the system to move to
that location.
Interface Elements
Interface elements, such as virtual menus, can be projected
around the rendering of a remote object to provide access to
different operations. Dynamically rendered physical affordances
[7], such as buttons or handles, that appear around the
remote objects can be used for control. The user could press,
push or pull such affordances to move the object.
Tangibles and Physical Tools
Tangible Tokens can be used to control a remote object.
As the user moves the token, the model of the remote object
is updated, and the remote object is moved to reflect the
changed state. Two tangible tokens can be linked such that
moving one causes the other to move, and vice versa, allowing
for bi-directional control [19].
Tools allow users to manipulate remote objects by interacting
with the local physical rendering. Tools can provide additional
degrees of freedom (DOFs) of input, when interacting
with the rendering. Our brush tool, for example, allows users
to push remote objects (see Figure 5). The bristles of the
brush serve two purposes. First, they decrease the friction between
the tool and the pins, which may get stuck when a lateral
force is applied. Second, they smooth the haptic feedback
resulting from the discrete, jerky motion when a physically
rendered object is translated on a limited resolution shape display.
To determine the direction in which to move the object,
the brush tool’s pose is tracked by an overhead camera, while
a mechanical switch senses pressure.

ผลลัพธ์ (ไทย) 1:

จะสอดคล้องกับภาพร่างให้ภาพลวงตาที่จริงมือมาจากหน้าจอสลับระหว่างแสดง มันอาจเป็นประโยชน์เมื่อต้องการสลับระหว่างการนำเสนอเหล่านี้ โทเค็นที่มีตัวตนเช่น สามารถแสดงวัตถุจับต้องได้ระยะไกล แต่ถ้าไม่มีผู้ใช้ระยะไกล พอ tokens เป็นจริงสามารถใช้แสดงผลแทน (ดูรูปที่ 3) มือสามารถแสดงเป็นสิ่งจำลองทางกายภาพเมื่อจัดการกับวัตถุหรือ เป็นภาพเสมือนเมื่อชี้ หรือทำ (ดูหมายเหตุในรูปที่ 7) เปลี่ยนสถานะเหล่านี้เป็นส่วนหนึ่งในแรงบันดาลของเราSublimate แนวคิด [14]ร่างกายจัดการกับวัตถุระยะไกลก่อนทำงาน [7, 5] ได้แสดงวิธีการใช้แสดงรูปร่างการจัดการทางกายภาพวัตถุ เช่น โดยใช้การแปลและการหมุนที่นี่ เราสำรวจแผนควบคุมต่าง ๆ ให้เป็นผู้ใช้สามารถจัดการวัตถุระยะไกล ใช้จับภาพรูปร่าง และจอแสดงผล ผู้ใช้สามารถเข้าถึงผ่านเครือข่าย และรับแบบระยะไกลวัตถุทางกายภาพ เทคนิคการโต้ตอบเหล่านี้ได้รับการพัฒนาผ่านต้นแบบซ้ำกับของเราแจ้งให้ทราบระบบการเทคนิคต่าง ๆ พยายามหลายร้อยของผู้เยี่ยมชมห้องปฏิบัติการของเราการจัดการวัตถุระยะไกล และข้อคิดเห็นของพวกเขา และของเราสังเกตการณ์นำเราในการพัฒนา และปรับปรุงต่อไปนี้เทคนิคการควบคุมรูปแบบควบคุมรูปแบบโดยตรงให้ผู้ใช้โต้ตอบโดยตรงกับวัตถุจับต้องได้ระยะไกลผ่านลื่นจริงนำส่งซึ่งถูกแสดงในการแสดงรูปร่างระยะไกล ที่แสดงรูปร่างของผู้ใช้แรงกับวัตถุโดยตรงวางอยู่บนพื้นผิว ตัวอย่างเช่น ถ้าผู้ใช้ใช้ถ้วยด้วยมือและยกพวกเขา นี้จะสามารถแสดงและหมุดสามารถย้ายลูกบอลขึ้นไป โดยสังเกตปฏิกิริยาของวัตถุทางกายภาพกับท่าทางของพวกเขานำส่ง ผู้ใช้สามารถ improviseเพื่อจัดการกับความหลากหลายของวัตถุ expressively ในขณะที่แสดงรูปร่างของเราในปัจจุบันใช้แนวตั้งกอง วัตถุสามารถยัง สามารถแปลแบบสมมาตร โดยเอียง และเลื่อน [7] นอกจากนี้ผู้ใช้มือและแขน วัตถุใด ๆ ที่อยู่ในบริเวณจับภาพรูปร่างคุณสามารถส่ง และใช้ในการจัดการวัตถุระยะไกล (ดูรูปที่ 4) เนื่องจากรูปร่างของเราจอแสดงผล ตามแจ้งให้ทราบ [7] 0-100 รูปร่างสามารถสร้างภาพเท่านั้นมม.สูง มีคำถามของวิธีการแสดงระยะไกลสิ่งแวดล้อม ซึ่งมักเกิน 100 มม.ในความสูง เราสำรวจแมป 2: 1:1 กับรูปแบบ และปรับสัดส่วนได้โซน การแม็ปการปรับสัดส่วนได้ใช้ข้อมูลความลึกและแผนที่ทั้งหมดค่าความสูงของขอบเขตสูงสุดของการแสดงรูปร่าง ที่สองแมป 1:1 กับรูปแบบโซน มีบางส่วนของพื้นที่อินพุตที่สูงเท่าความสูงสูงสุดการเดินทาง และทำการแสดงรูปร่าง นี้ได้โดยตรงรูปที่ 5 กดกับด้านของวัตถุที่แสดงรูปร่างมีการเครื่องมือแปรงย้ายนั้นเหนือพื้นผิว หรือ กลางอากาศ ช่วยให้ผู้ใช้สัมผัส pinอาร์เรย์โดยไม่ต้องจัดการกับวัตถุระยะไกล ใน teleoperation ของเราเราใช้การแมป 1:1 โซนรูปแบบของสถานการณ์แสดงผลจริงเริ่มต้นขวาเหนือหน้าจอแนวนอนควบคุมรูปแบบ mediated นำที่ของวัตถุระยะไกลก่อให้เกิดการติดตาม และสามารถปรับปรุง และย้ายไปเก็บไว้ตรงกับของรุ่นดิจิตอลต้นแบบ [7] Physicsbasedผู้ตาม มีแบบ ตรวจสอบรูปแบบลายเส้นอัพเด ตและย้าย ใช้รีฟิสิกส์ การปรับปรุงรุ่นแล้วทำให้วัตถุระยะไกลจะย้ายจริงนี่คือคล้ายกับวิธีใช้พร็อกซี่ใน HoloDesk [10],แต่กับ actuated ผลลัพธ์จริง สัญลักษณ์รูปแบบลายเส้นให้ผู้ควบคุมนามธรรมมากขึ้น ผู้ใช้สามารถหยิกกว่านี้การแสดงของวัตถุระยะไกลที่จะคว้า ย้ายแขนของพวกเขาไปยัง ตำแหน่งอื่น และเปิดหยิกรูปแบบลายเส้นการปล่อยวัตถุระยะไกลเป็น actuated ระบบย้ายไปแล้วตำแหน่งที่ตั้งองค์ประกอบส่วนติดต่อองค์ประกอบส่วนติดต่อ เช่นเมนูเสมือน สามารถจะคาดการณ์สถานภาพของวัตถุระยะไกลเพื่อให้เข้าถึงการดำเนินการที่แตกต่างกัน แบบไดนามิกแสดงจริง affordances[7], เช่นปุ่มหรือจับ ที่ปรากฏอยู่รอบตัววัตถุระยะไกลสามารถใช้สำหรับการควบคุม ผู้ใช้สามารถกดผลักดัน หรือดึง affordances เช่นการย้ายวัตถุTangibles และเครื่องมือทางกายภาพจับสัญญาณสามารถใช้ควบคุมวัตถุระยะไกลขณะที่ผู้ใช้ย้ายโทเค็น รูปแบบของวัตถุระยะไกลมีการปรับปรุง และวัตถุระยะไกลจะถูกย้ายไปแสดงเปลี่ยนสถานะ สามารถเชื่อมโยงสัญญาณสองจับให้ย้ายหนึ่งสาเหตุอื่น ๆ เพื่อย้าย และในทางกลับกัน ทำให้สำหรับควบคุมทิศทาง [19]เครื่องมือช่วยให้ผู้ใช้เพื่อจัดการวัตถุระยะไกล โดยการโต้ตอบด้วยการจำลองทางกายภาพภายใน เครื่องมือที่สามารถให้เพิ่มเติมองศาความเป็นอิสระ (DOFs) ของอินพุต เมื่อโต้ตอบกับภาพ เครื่องมือแปรงของเรา ตัวอย่าง ช่วยให้ผู้ใช้ผลักดันวัตถุระยะไกล (ดูรูปที่ 5) Bristles ของแปรงใช้วัตถุประสงค์ที่สอง อันดับแรก จะลดแรงเสียดทานระหว่างเครื่องมือและหมุด ซึ่งอาจติดเมื่อด้านข้างบังคับใช้ สอง พวกเขาเรียบผลป้อนกลับ hapticเกิดจากการเคลื่อนไหวแยกกัน กระตุกเมื่อตัวจริงมีแปลวัตถุที่แสดงบนจอแสดงผลความละเอียดจำกัดรูปร่างเพื่อกำหนดทิศทางในการย้ายวัตถุของเครื่องมือแปรงก่อให้เกิดการติดตาม ด้วยกล้องจ่าย ในขณะที่สวิตช์ทางกลความรู้สึกกดดัน

ผลลัพธ์ (ไทย) 2:

จะสอดคล้องกับรูปทรงการแสดงผลเพื่อให้ภาพลวงตา
ว่ามือทางกายภาพออกมาจากหน้าจอ.
สลับไปมาระหว่างการรับรอง มันอาจจะเป็นข้อได้เปรียบ
ในการสลับระหว่างการแสดงเหล่านี้ สัญลักษณ์ที่จับต้องได้
เช่นอาจจะแสดงโดยวัตถุที่จับต้องได้จากระยะไกล แต่
ถ้าผู้ใช้ระยะไกลไม่ได้มีสัญญาณเพียงพอทางกายภาพ
การแสดงผลสามารถใช้แทน (ดูรูปที่ 3) มือสามารถ
แสดงเป็นเค้ากายภาพเมื่อจัดการกับวัตถุ
หรือเป็นเสมือนการแสดงผลเมื่อชี้หรือ annotating (ดู
รูปที่ 7) เปลี่ยนสถานะเหล่านี้จะเป็นส่วนหนึ่งในแรงบันดาลใจจากของเรา
แนวคิดระเหิด [14].
ทางร่างกายจัดการกับ REMOTE OBJECTS
ทำงานก่อน [7, 5] ได้แสดงให้เห็นวิธีการแสดงรูปร่างสามารถนำมาใช้
ในการจัดการกับวัตถุทางกายภาพเช่นการใช้การแปลและการหมุน.
ที่นี่เราสำรวจ รูปแบบการควบคุมที่แตกต่างกันเพื่อให้
ผู้ใช้สามารถจัดการวัตถุระยะไกล ใช้การจับภาพรูปร่างและ
แสดงผลให้ผู้ใช้สามารถเข้าถึงผ่านทางเครือข่ายและรับระยะไกล
วัตถุทางกายภาพ เทคนิคการปฏิสัมพันธ์เหล่านี้ถูกพัฒนา
ผ่านการสร้างต้นแบบซ้ำกับระบบแจ้งของเรา.
หลายร้อยของผู้เข้าชมห้องปฏิบัติการของเราพยายามเทคนิคที่แตกต่างกัน
ในการจัดการกับวัตถุระยะไกลและความคิดเห็นของเราและพวกเขา
สังเกตนำเราไปสู่การพัฒนาและปรับปรุงต่อไปนี้
เทคนิค.
ท่าทางการควบคุม
ท่าทางการควบคุมโดยตรงช่วยให้ ผู้ใช้สามารถติดต่อโดยตรงกับ
วัตถุที่จับต้องได้ระยะไกลผ่านศูนย์รวมทางกายภาพส่ง
ซึ่งจะแสดงผลบนจอแสดงผลรูปทรงระยะไกล
รูปร่างกลายเป็นของผู้ใช้โดยตรงใช้แรงไปยังวัตถุ
ที่วางอยู่บนพื้นผิว ตัวอย่างเช่นหากผู้ใช้ในรูปแบบถ้วย
ด้วยมือและยกพวกเขานี้จะแสดงผลและ
ขาสามารถย้ายลูกขึ้นไป โดยการสังเกตปฏิกิริยาของ
วัตถุทางกายภาพกับท่าทางของพวกเขาส่งผู้ใช้สามารถโพล่ง
ครุ่นคิดที่จะจัดการกับความหลากหลายของวัตถุ ในขณะที่
การแสดงรูปร่างของเราในขณะนี้ใช้กองกำลังตามแนวตั้งวัตถุที่สามารถ
ยังคงได้รับการแปลโดยการเอียงด้านข้างและเลื่อน [7] นอกจาก
ไปอยู่ในมือของผู้ใช้และอาวุธวัตถุที่วางอยู่ใน
พื้นที่การจับรูปร่างสามารถส่งและใช้ในการจัดการ
วัตถุระยะไกล (ดูรูปที่ 4) เพราะรูปร่างของเรา
แสดงผลบนพื้นฐานของการแจ้ง [7] เท่านั้นที่สามารถทำให้รูปร่าง 0-100
มิลลิเมตรความสูงมีคำถามของวิธีการที่จะทำให้ระยะไกล
สภาพแวดล้อมซึ่งส่วนใหญ่มีแนวโน้มขยายเกิน 100 มิลลิเมตร
ความสูง เราสำรวจสองแมป: สเกลและ 1: 1 กับท่าทาง
โซน การทำแผนที่จะใช้เวลาปรับขนาดข้อมูลเชิงลึกและแผนที่
ค่าความสูงที่มีขอบเขตการแสดงผลสูงสุดรูปร่าง
การทำแผนที่ที่สอง 1: 1 พร้อมโซนท่าทางใช้เวลาส่วนหนึ่งของบาง
พื้นที่มีการป้อนข้อมูลที่เป็นความสูงเดียวกับความสูงสูงสุด
ในการเดินทางและทำให้มันบนจอแสดงผลรูปทรง นี้ได้โดยตรง
รูปที่ 5 ผลักดันกับด้านข้างของวัตถุรูปร่างที่แสดงผลด้วย
เครื่องมือแปรงย้ายมัน.
เหนือผิวน้ำหรือกลางอากาศที่ช่วยให้ผู้ใช้สามารถสัมผัสขา
อาร์เรย์โดยไม่ต้องจัดการกับวัตถุระยะไกล ใน teleoperation ของเรา
สถานการณ์ที่เราใช้ 1: 1 การทำแผนที่ด้วยโซนท่าทางของ
การแสดงผลทางกายภาพเริ่มต้นขวาด้านบนหน้าจอแนวนอน.
ไกล่เกลี่ยหาประโยชน์การควบคุมท่าทางว่าวัตถุระยะไกล
ก่อให้เกิดการติดตามและสามารถปรับปรุงและย้ายไปให้มัน
ตรงกับพื้นฐานของ รูปแบบดิจิตอล [7] Physicsbased
ท่าทางตรวจสอบการชนกันของผู้ใช้ที่มีรูปแบบ
ในการปรับปรุงและเคลื่อนย้ายไปใช้ห้องสมุดฟิสิกส์ ปรับปรุง
รูปแบบแล้วทำให้วัตถุระยะไกลที่จะย้ายร่างกาย.
นี้จะคล้ายกับวิธีการพร็อกซี่ที่ใช้ใน HoloDesk [10],
แต่มีผลผลิตทางกายภาพกระตุ้น ท่าทางที่เป็นสัญลักษณ์ให้
ผู้ใช้ที่มีการควบคุมนามธรรมมากขึ้น ผู้ใช้สามารถหยิกกว่า
การเป็นตัวแทนของวัตถุระยะไกลที่จะคว้ามันขยับแขนของพวกเขา
ไปยังตำแหน่งอื่นและเปิดท่าทางหยิกที่จะปล่อยมัน.
วัตถุระยะไกลถูกกระตุ้นแล้วโดยระบบจะย้ายไปยัง
สถานที่ที่.
การเชื่อมต่อองค์ประกอบ
องค์ประกอบอินเตอร์เฟซ เช่นเมนูเสมือนสามารถฉาย
รอบการแสดงผลของวัตถุระยะไกลเพื่อให้สามารถเข้าถึง
การดำเนินงานที่แตกต่างกัน การแสดงผลแบบไดนามิก affordances ทางกายภาพ
[7] เช่นปุ่มหรือมือจับที่ปรากฏรอบ ๆ
วัตถุระยะไกลสามารถใช้สำหรับการควบคุม ผู้ใช้สามารถกด
ผลักดันหรือดึง affordances ดังกล่าวเพื่อย้ายวัตถุ.
Tangibles และเครื่องมือทางกายภาพ
ราชสกุลที่มีตัวตนสามารถนำมาใช้ในการควบคุมวัตถุระยะไกล.
ในฐานะที่เป็นผู้ใช้เลื่อน token, รูปแบบของวัตถุระยะไกล
มีการปรับปรุงและวัตถุระยะไกล ถูกย้ายไปยังสะท้อนให้เห็นถึง
การเปลี่ยนแปลงของรัฐ สองราชสกุลที่มีตัวตนสามารถเชื่อมโยงดังกล่าวว่า
การย้ายหนึ่งทำให้เกิดการอื่น ๆ ที่จะย้ายและในทางกลับกันช่วยให้
สำหรับการควบคุมแบบสองทิศทาง [19].
เครื่องมือให้ผู้ใช้สามารถจัดการวัตถุระยะไกลโดยการมีปฏิสัมพันธ์
กับการแสดงผลทางกายภาพท้องถิ่น เครื่องมือสามารถให้เพิ่มเติม
องศาอิสระ (DOFs) ของการป้อนข้อมูลเมื่อมีปฏิสัมพันธ์
กับการแสดงผล เครื่องมือแปรงของเราตัวอย่างเช่นช่วยให้ผู้ใช้
ที่จะผลักดันวัตถุระยะไกล (ดูรูปที่ 5) ขนแปรงของ
แปรงมีจุดประสงค์สอง ครั้งแรกพวกเขาลดแรงเสียดทานระหว่าง
เครื่องมือและขาซึ่งอาจได้รับการติดอยู่ด้านข้างเมื่อ
แรงถูกนำไปใช้ ประการที่สองพวกเขาเรียบสัมผัสความคิดเห็น
ที่เกิดจากการแยกการเคลื่อนไหวกระตุกเมื่อร่างกาย
วัตถุกลายเป็นได้รับการแปลในรูปร่างมติ จำกัด การแสดงผล.
เพื่อกำหนดทิศทางในการที่จะย้ายวัตถุที่
ก่อให้เกิดเครื่องมือแปรงที่ถูกติดตามโดยกล้องเหนือศีรษะ ในขณะที่
สวิทช์กลแรงดัน

ผลลัพธ์ (ไทย) 3:

จะสอดคล้องกับรูปร่างการแสดงผลเพื่อให้ภาพลวงตา
ที่มือทางกายภาพจะออกจากหน้าจอ .
สลับไปมาระหว่างที่ใช้แทน มันอาจจะมีประโยชน์
เพื่อสลับระหว่างการแสดงเหล่านี้ จริงๆ โทเค็น
เช่น อาจจะแทนด้วยวัตถุระยะไกลได้ แต่
ถ้าผู้ใช้ไม่ได้มีสัญญาณพอร่างกาย
การแสดงผลสามารถใช้แทน ( ดูรูปที่ 3 )มือสามารถ
แสดงเป็น renderings ทางกายภาพเมื่อจัดการกับวัตถุ
หรือเป็นเสมือนการแสดงผลเมื่อชี้หรือ annotating ( ดู
รูปที่ 7 ) เหล่านี้มีการเปลี่ยนสถานะในส่วนที่ได้รับแรงบันดาลใจจากแนวคิดของเรา
sublimate [ 14 ] .
ร่างกายจัดการวัตถุระยะไกลก่อนที่งาน [ 7
5 ] ได้แสดงวิธีรูปร่างแสดงสามารถใช้
จัดการวัตถุทางกายภาพ เช่น การแปลและการหมุน .
ที่นี่เลยเรามาดูรูปแบบการควบคุมที่แตกต่างกันเพื่อช่วยให้ผู้ใช้จัดการ
วัตถุระยะไกล ใช้จับภาพรูปร่างและ
จอแสดงผล ผู้ใช้สามารถเข้าถึงผ่านทางเครือข่ายและรับระยะไกล
ทางกายภาพของวัตถุ เทคนิคการโต้ตอบเหล่านี้ถูกพัฒนาจากต้นแบบด้วยซ้ำ

แจ้งระบบ หลายร้อยผู้เข้าเยี่ยมชมห้องปฏิบัติการของเราพยายามที่แตกต่างกันเทคนิค
จัดการวัตถุระยะไกลและความคิดเห็นของพวกเขาและการสังเกตของเรา
ทำให้เราพัฒนาและปรับปรุงเทคนิคต่อไป
.

ท่าทางท่าทางควบคุมตัวควบคุมโดยตรงจะช่วยให้ผู้ใช้โต้ตอบโดยตรงกับวัตถุผ่านรีโมทได้

ส่งทางกายซึ่งมีการแสดง , บนจอแสดงผลรูปทรงรีโมท
แสดงรูปร่างของผู้ใช้โดยตรงใช้บังคับวัตถุ
วางไว้บนพื้นผิว ตัวอย่างเช่นหากผู้ใช้รูปแบบถ้วย
ด้วยมือและเพิ่มพวกเขา นี้จะแสดงผลและ
พินสามารถย้ายลูกขึ้น โดยการสังเกตปฏิกิริยาของวัตถุทางกายภาพของพวกเขาส่ง

ท่าทาง ผู้ใช้สามารถกลอนสดเพื่อ Expressively จัดการกับความหลากหลายของวัตถุ ในขณะที่
รูปร่างของเราแสดงในปัจจุบันใช้บังคับตามแนวตั้ง , วัตถุสามารถ
ยังได้รับการแปลโดยการเอียงด้านข้างและเลื่อน [ 7 ]นอกจากนี้
มือของผู้ใช้และอาวุธ วัตถุใด ๆที่วางอยู่ใน
รูปร่างจับภาพพื้นที่ที่สามารถส่งผ่านและใช้เพื่อจัดการ
วัตถุระยะไกล ( ดูรูปที่ 4 ) เพราะแสดงรูปร่าง
ของเรา ตามแจ้ง [ 7 ] , สามารถแสดงรูปร่าง 0-100
มม. ความสูงมันเป็นคำถามของวิธีการที่จะให้สภาพแวดล้อมระยะไกล
ซึ่งน่าจะเกิน 100 mm
ความสูง เราสำรวจสองแมป :ปรับขนาดและอัตราส่วน 1 : 1 กับท่าทาง
โซน การปรับใช้ข้อมูลแผนที่ความลึกและความสูงของแผนที่
คุณค่าสูงสุดของรูปทรงแสดงขอบเขต
แผนที่ 2 , 1 : 1 กับท่าทางโซน เอาบางส่วนของ
ใส่พื้นที่ที่มีความสูงเท่ากับความสูง
เดินทางสูงสุดและให้มันในรูปที่แสดง นี้สามารถโดยตรง
รูปที่ 5ผลักดันกับด้านข้างของรูปร่างการแสดงผลวัตถุด้วยเครื่องมือแปรงเลื่อน
.
ข้างบนพื้นผิวหรืออากาศกลางช่วยให้ผู้ใช้สัมผัสขา
อาร์เรย์โดยไม่ต้องจัดการกับวัตถุระยะไกล ในสถานการณ์ระยะไกล
ของเราเราใช้แผนที่ 1 : 1 กับท่าทางโซนของ
การแสดงผลทางเริ่มข้างบนจอแนวนอน .
( ท่าทางห้าวหาญที่รีโมทควบคุมวัตถุ
ท่าจะมีการติดตามและสามารถปรับปรุงและย้ายไปเก็บไว้
ตรงกับพื้นฐานของรูปแบบดิจิตอล [ 7 ] physicsbased
ท่าทางตรวจจับการชนกันของผู้ใช้ด้วยรูปแบบ
ปรับปรุงและย้ายโดยใช้ฟิสิกส์ห้องสมุด ปรับปรุงล่าสุด
รูปแบบแล้วสาเหตุวัตถุระยะไกลเพื่อให้ร่างกายเคลื่อนไหว
นี้คล้ายกับพร็อกซีวิธีการที่ใช้ใน holodesk [ 10 ]
แต่กระตุ้นร่างกายออกสัญลักษณ์แสดงท่าทางให้
ผู้ใช้ที่มีการควบคุมที่เป็นนามธรรมมากกว่า ผู้ใช้สามารถหยิกกว่า
เป็นตัวแทนของวัตถุระยะไกลเพื่อจับมัน ขยับแขน
ไปยังสถานที่อื่น และเปิดหยิกท่าทางจะปล่อย .
วัตถุระยะไกลถูกกระตุ้นโดยระบบที่จะย้ายไปยังสถานที่ที่อินเตอร์เฟซ
.

อินเตอร์เฟซ เช่นเมนูเสมือนจริง สามารถ โดย
รอบการแสดงผลของวัตถุที่ระยะไกลเพื่อให้เข้าถึง
การดําเนินงานที่แตกต่างกัน การแสดงผลทางกายภาพแบบไดนามิก affordances
[ 7 ] , เช่นปุ่มหรือจับที่ปรากฏรอบ
วัตถุระยะไกลสามารถใช้ในการควบคุม ผู้ใช้สามารถกด
ดันหรือดึงเช่น affordances เพื่อย้ายวัตถุรูปธรรมและเครื่องมือทางกายภาพ

โทเค็นที่มีตัวตนที่สามารถใช้ในการควบคุมวัตถุระยะไกล
เมื่อผู้ใช้เลื่อนสัญลักษณ์ , รูปแบบของวัตถุระยะไกล
มีการปรับปรุงและวัตถุระยะไกล คือ ย้าย ที่จะสะท้อน
เปลี่ยนสถานะ สองสัญญาณที่สามารถเชื่อมโยงได้ เช่น
ย้ายหนึ่งสาเหตุอื่นที่จะย้ายและในทางกลับกันช่วยให้ควบคุมสอง
[ 19 ] .
เครื่องมือช่วยให้ผู้ใช้เพื่อจัดการกับวัตถุระยะไกลโดยการโต้ตอบ
กับการแสดงผลทางท้องถิ่น เครื่องมือที่สามารถให้เพิ่มเติม
องศาเสรี ( dofs ) ของเข้าเมื่อกระทบ
ด้วยการแสดงผล . เครื่องมือแปรงของเรา ตัวอย่างเช่น ผู้ใช้
ดันวัตถุระยะไกล ( ดูรูปที่ 5 ) ขนแปรงของแปรงให้บริการสองวัตถุประสงค์
. อย่างแรก พวกเขาลดแรงเสียดทานระหว่าง
เครื่องมือและหมุด ซึ่งอาจติดเมื่อแรงด้านข้าง
คือใช้ ที่สอง , พวกเขาให้ข้อเสนอแนะ haptic
ที่เกิดจากการไม่ต่อเนื่องกระตุกเคลื่อนไหวเมื่อร่างกาย
การแสดงวัตถุบนจอแสดงผลความละเอียดรูปร่างแปล ) .
เพื่อกำหนดทิศทางในการที่จะย้ายวัตถุ
ท่าแปรงเครื่องมือก็ถูกติดตาม โดยการติดตั้งกล้อง ในขณะที่
สวิตช์ความดันสัมผัสกล