However, it is unreasonable to expe

However, it is unreasonable to expect such a model to be a perfect
match to the depicted object—the visual world is too varied to
ever be captured perfectly no matter how large the dataset. Therefore,
our approach deals with several types of mismatch between
the photographed object and the stock 3D model:
Geometry Mismatch. Interestingly, even among standard, massproduced
household brands (e.g., detergent bottles), there are often
subtle geometric variabilities as manufacturers tweak the shape of
their products. Of course, for natural objects (e.g., a banana), the
geometry of each instance will be slightly different. Even in the
cases when a perfect match could be found (e.g., a car of a specific
make, model, and year), many 3D models are created with artistic
license and their geometry will likely not be metrically accurate, or
there are errors due to scanning.
Apperance Mismatch. Although both artists and scanning techniques
often provide detailed descriptions of object appearance
(surface reflectance), these descriptions may not match the colors
and textures (and aging and weathering effects) of the particular
instance of the object in the photograph.
Illumination Mismatch. To perform realistic manipulations in
3D, we need to generate plausible lighting effects, such as shadows
on an object and on contact surfaces. The environment illumination
that generates these effects is not known a priori, and the user may
not have access to the original scene to take illumination measurements
(e.g., in dynamic environments or for legacy photographs).
Our approach uses the pixel information in visible parts of the
object to correct the three sources of mismatch. The user semiautomatically
aligns the stock 3D model to the photograph using a
real-time geometry correction interface that preserves symmetries
in the object. Using the aligned model and photograph, our approach
automatically estimates environment illumination and appearance
information in hidden parts of the object. While a photograph
and 3D model may still not contain all the information needed
to precisely recreate the scene, our approach sufficiently approximates
the illumination, geometry, and appearance of the underlying
object and scene to produce plausible completion of uncovered areas.
Indeed, as shown by the user study in Section 8, our approach
plausibly reveals hidden areas of manipulated objects.
The ability to manipulate objects in 3D while maintaining realism
greatly expands the repertoire of creative manipulations that can
be performed on a photograph. Users are able to quickly perform
object-level motions that would be time-consuming or simply impossible
in 2D. For example, from just one photograph, users can
cause grandma’s car to perform a backflip, and fake a baby lifting a
heavy sofa. We tie our approach to standard modeling and animation
software to animate objects from a single photograph. In this
way, we re-imagine typical Photoshop edits—such as object rotation,
translation, rescaling, deformation, and copy-paste—as object
manipulations in 3D, and enable users to more directly translate
what they envision into what they can create.
Contributions. Our key contribution is an approach that allows
out-of-plane 3D manipulation of objects in consumer photographs,
while providing a seamless break from the original image. To do
so, our approach leverages approximate object symmetries and a
new non-parametric model of image-based lighting for appearance
completion of hidden object parts and for illumination-aware compositing
of the manipulated object into the image. We make no assumptions
on the structure or nature of the object being manipulated
beyond the fact that an approximate stock 3D model is available.
Assumptions. In this paper, we assume a Lambertian model of
illumination. We do not model material properties such as refraction

ผลลัพธ์ (ไทย) 1:

อย่างไรก็ตาม เป็น unreasonable คาดว่ารูปแบบดังกล่าวจะ เป็นตรงกับวัตถุ depicted — โลกภาพเกินไปแตกต่างกันไปเคยถูกจับอย่างว่าชุดข้อมูลขนาด ดังนั้นวิธีของเราเกี่ยวข้องกับหลายชนิดตรงวัตถุ photographed และโมเดล 3 มิติสินค้าคงคลัง:เรขาคณิตไม่ตรงกัน แม้เป็นเรื่องน่าสนใจ ระหว่างมาตรฐาน massproducedในครัวเรือนยี่ห้อ (เช่น ผงซักฟอกขวด), มักจะมีรายละเอียด variabilities เรขาคณิตเป็นผู้ผลิตปรับแต่งรูปร่างของผลิตภัณฑ์ของพวกเขา สำหรับวัตถุธรรมชาติ (เช่น เป็นกล้วย), หลักสูตร การเรขาคณิตของแต่ละอย่างจะแตกต่างกันเล็กน้อย แม้แต่ในการกรณีเมื่อพบคู่ที่สมบูรณ์แบบ (เช่น รถการยี่ห้อ รุ่น และปี), สร้างขึ้น ด้วยศิลปะหลายรูปแบบ 3Dลิขสิทธิ์และเรขาคณิตของพวกเขาอาจจะไม่ถูกต้อง metrically หรือมีข้อผิดพลาดเนื่องจากการสแกนApperance ไม่ตรงกัน แม้ว่าศิลปินและเทคนิคการสแกนมักจะให้คำอธิบายรายละเอียดของลักษณะที่ปรากฏของวัตถุ(แบบผิวสะท้อนแสง), คำอธิบายเหล่านี้อาจไม่ตรงกับสีและพื้นผิว (และอายุ และผลกระทบของสภาพอากาศ) เฉพาะอินสแตนซ์ของวัตถุในภาพแสงสว่างไม่ตรงกัน ทำ manipulations ภาพจริงใน3D เราจำเป็นต้องสร้างลักษณะพิเศษของแสงเป็นไปได้ เช่นเงาวัตถุ และพื้นผิวติดต่อ สภาพแวดล้อมแสงสว่างที่สร้างเหล่านี้ผลจะเรียกเป็น priori และผู้ใช้อาจไม่สามารถเข้าถึงฉากเดิมจะวัดแสงสว่าง(เช่น ในสภาพแวดล้อมแบบไดนามิก หรือภาพถ่ายเก่า)วิธีของเราใช้ข้อมูลพิกเซลในส่วนที่มองเห็นได้ของการวัตถุการแก้ไขแหล่งสามของไม่ตรงกัน ผู้ใช้ไปยังบุคคลจัดแบบ 3D หุ้นการใช้ภาพถ่ายเป็นอินเทอร์เฟซการแก้ไขเรขาคณิตแบบเรียลไทม์ที่รักษา symmetriesในวัตถุนั้น โดยใช้แบบจำลองการจัดตำแหน่ง และภาพถ่าย วิธีการของเราประเมินสภาพแวดล้อมแสงสว่างและลักษณะที่ปรากฏโดยอัตโนมัติข้อมูลในส่วนของวัตถุที่ซ่อน ขณะที่รูปถ่ายและแบบ 3D อาจยังไม่ประกอบด้วยข้อมูลที่จำเป็นการสร้างฉากแม่นยำ วิธีการของเราเพียงพอ approximatesรัศมี เรขาคณิต และลักษณะของตัววัตถุและฉากการรับมือความสมบูรณ์ของพื้นที่เถจริง แสดง โดยการศึกษาผู้ใช้ในส่วน 8 วิธีการของเราplausibly เผยพื้นที่ซ่อนวัตถุแรก ๆความสามารถในการจัดการวัตถุใน 3 มิติในขณะที่รักษาความสมจริงขยายตัวละครของ manipulations ภาพสร้างสรรค์ที่สามารถมากสามารถทำบนรูปถ่าย ผู้ใช้จะสามารถดำเนินการได้อย่างรวดเร็วเคลื่อนไหววัตถุระดับที่จะใช้เวลานาน หรือไม่ก็ในสองมิติ ตัวอย่าง จากภาพถ่ายเพียงหนึ่ง ผู้ใช้สามารถทำให้รถของคุณยายทำ backflip และปลอมทารกยกตัวโซฟาหนัก เราผูกของเราวิธีการสร้างแบบจำลองมาตรฐานและเคลื่อนไหวซอฟแวร์การเคลื่อนไหววัตถุจากรูปถ่ายเดียว ในที่นี้วิธี เราอีกคิดแก้ไข Photoshop ปกติ — เช่นการหมุนวัตถุแปล rescaling แมพ และคัดลอกวาง — เป็นวัตถุmanipulations ภาพ 3D และเปิดใช้งานผู้ใช้การแปลโดยตรงมากขึ้นที่พวกเขาวาดภาพในสิ่งที่พวกเขาสามารถสร้างจัดสรร ส่วนสำคัญของเราคือ วิธีการที่ช่วยให้ออกของเครื่องบิน 3D การจัดการวัตถุในภาพถ่ายของผู้บริโภคให้แบ่งจำแนกจากภาพต้นฉบับ จะทำอย่างไรวิธีการของเราใช้วัตถุประมาณ symmetries และที่รุ่นใหม่ไม่ใช่พาราเมตริกของแสงตามภาพในลักษณะเสร็จสมบูรณ์ชิ้นวัตถุที่ซ่อน และแอลฟารัศมีทราบของวัตถุแรก ๆ เป็นรูป เราทำให้ไม่มีสมมติฐานโครงสร้างหรือลักษณะของวัตถุถูกจัดการนอกเหนือจากความจริงที่ว่าแบบจำลอง 3D ประมาณหุ้นพร้อมใช้งานสมมติฐาน ในเอกสารนี้ เราสมมติแบบ Lambertian ของแสงสว่าง เรารูปแบบคุณสมบัติของวัสดุเช่นการหักเห

ผลลัพธ์ (ไทย) 2:

แต่ก็เป็นเหตุผลที่จะคาดหวังว่ารูปแบบดังกล่าวจะเป็นที่สมบูรณ์แบบ
ตรงกับวัตถุโลกที่มองเห็นภาพที่มีแตกต่างกันเกินไปที่จะ
เคยถูกจับได้อย่างสมบูรณ์แบบไม่ว่าขนาดใหญ่ชุด ดังนั้น
ข้อเสนอวิธีการของเรามีหลายประเภทไม่ตรงกันระหว่าง
วัตถุและถ่ายภาพแบบ 3 มิติหุ้น:
เรขาคณิตไม่ตรงกัน ที่น่าสนใจแม้ในหมู่มาตรฐาน massproduced
แบรนด์ที่ใช้ในครัวเรือน (เช่นขวดผงซักฟอก) มักจะมี
variabilities เรขาคณิตที่ลึกซึ้งเป็นผู้ผลิตปรับแต่งรูปทรงของ
ผลิตภัณฑ์ของตน ซึ่งแน่นอนว่าสำหรับวัตถุธรรมชาติ (เช่นกล้วย)
เช่นรูปทรงเรขาคณิตของแต่ละคนจะแตกต่างกันเล็กน้อย แม้ใน
กรณีที่คู่ที่สมบูรณ์แบบอาจจะพบ (เช่นรถที่เฉพาะเจาะจง
ให้นางแบบและปี) แบบจำลอง 3 มิติหลายคนถูกสร้างขึ้นด้วยศิลปะ
ใบอนุญาตและเรขาคณิตของพวกเขาจะไม่ได้มีความถูกต้องตวงวัดหรือ
มีข้อผิดพลาดอันเนื่องมาจาก การสแกน.
ลักษณะไม่ตรงกัน แม้ว่าทั้งสองศิลปินและเทคนิคการสแกน
มักจะให้คำอธิบายรายละเอียดของการปรากฏตัวของวัตถุ
(สะท้อนพื้นผิว) คำอธิบายเหล่านี้อาจจะไม่ตรงกับสี
และพื้นผิว (และผลกระทบริ้วรอยและสภาพดินฟ้าอากาศ) โดยเฉพาะอย่างยิ่งของ
ตัวอย่างของวัตถุในภาพ.
สว่างไม่ตรงกัน เพื่อดำเนินกิจวัตรจริงใน
3 มิติที่เราต้องการที่จะสร้างผลกระทบของแสงที่เป็นไปได้เช่นเงา
บนวัตถุและพื้นผิวที่สัมผัส ไฟส่องสว่างสภาพแวดล้อม
ที่สร้างผลกระทบเหล่านี้ไม่เป็นที่รู้จักเบื้องต้นและผู้ใช้อาจ
ไม่สามารถเข้าถึงที่เกิดเหตุเดิมที่จะใช้วัดการส่องสว่าง
(เช่นในสภาพแวดล้อมแบบไดนามิกหรือสำหรับการถ่ายภาพแบบดั้งเดิม).
วิธีการของเราจะใช้ข้อมูลพิกเซลในส่วนที่มองเห็นของ
วัตถุที่จะแก้ไขในสามแหล่งที่มาของไม่ตรงกัน ผู้ใช้ semiautomatically
สอดคล้องรูปแบบ 3 มิติหุ้นเพื่อการถ่ายภาพโดยใช้
เรียลไทม์อินเตอร์เฟซการแก้ไขรูปทรงเรขาคณิตที่เก็บรักษา symmetries
ในวัตถุ โดยใช้แบบจำลองชิดและถ่ายภาพวิธีการของเรา
โดยอัตโนมัติประมาณการส่องสว่างสภาพแวดล้อมและลักษณะ
ข้อมูลในส่วนของวัตถุที่ซ่อนอยู่ ในขณะที่การถ่ายภาพ
แบบ 3 มิติและยังอาจไม่ประกอบด้วยข้อมูลทั้งหมดที่จำเป็น
ได้อย่างแม่นยำสร้างฉากที่วิธีการของเราพอใกล้เคียงกับ
แสงรูปทรงเรขาคณิตและลักษณะของต้นแบบ
วัตถุและฉากในการผลิตเสร็จสิ้นไปได้ในพื้นที่เปิด.
แท้จริงที่แสดงโดย การศึกษาของผู้ใช้ในมาตรา 8 วิธีการของเรา
แสดงให้เห็นว่าพื้นที่ที่มีเหตุผลที่ซ่อนอยู่ของวัตถุจัดการ.
ความสามารถในการจัดการกับวัตถุในแบบ 3 มิติขณะที่ยังคงความเป็นธรรมชาติ
ช่วยขยายกิจวัตรบุคลิกของความคิดสร้างสรรค์ที่สามารถ
ดำเนินการในการถ่ายภาพ ผู้ใช้จะสามารถดำเนินการได้อย่างรวดเร็ว
การเคลื่อนไหวของวัตถุในระดับที่จะใช้เวลานานหรือไม่ก็เป็นไปไม่ได้
ใน 2 มิติ ยกตัวอย่างเช่นจากการถ่ายภาพเพียงหนึ่งในผู้ใช้สามารถ
ทำให้เกิดรถยายที่จะดำเนินการตีลังกาและปลอมทารกยก
โซฟาหนัก เราผูกวิธีการของเราในการสร้างแบบจำลองมาตรฐานและภาพเคลื่อนไหว
ซอฟแวร์ในการเคลื่อนไหววัตถุจากภาพเดียว ในการนี้
ทางเรากำลังจินตนาการ Photoshop ทั่วไปแก้ไขเช่นการหมุนวัตถุ
แปล rescaling ผิดปกติและคัดลอกวางเป็นวัตถุ
กิจวัตรในแบบ 3 มิติและช่วยให้ผู้ใช้โดยตรงแปล
สิ่งที่พวกเขามองเห็นในสิ่งที่พวกเขาสามารถสร้าง
การมีส่วนร่วม ผลงานที่สำคัญของเราคือวิธีการที่จะช่วยให้
ออกจากเครื่องบินการจัดการ 3 มิติของวัตถุในภาพของผู้บริโภค
ในขณะที่ให้แบ่งที่ไร้รอยต่อจากภาพต้นฉบับ จะทำอย่างไร
เพื่อให้วิธีการของเราใช้ประโยชน์จาก symmetries วัตถุโดยประมาณและ
รูปแบบที่ไม่ใช่ตัวแปรใหม่ของแสงภาพที่ใช้สำหรับการปรากฏตัว
ความสำเร็จของชิ้นส่วนวัตถุที่ซ่อนอยู่และคอมโพสิตตระหนักถึงการส่องสว่าง
ของวัตถุที่จัดการลงในภาพ เราทำให้สมมติฐานไม่มี
โครงสร้างหรือลักษณะของวัตถุที่ถูกครอบงำ
เกินความจริงที่ว่ารูปแบบ 3 มิติโดยประมาณหุ้นที่มีอยู่.
สมมติฐาน ในบทความนี้เราถือว่าเป็นรูปแบบ Lambertian ของ
การส่องสว่าง เราไม่ได้แบบคุณสมบัติของวัสดุเช่นการหักเหของแสง

ผลลัพธ์ (ไทย) 3:

อย่างไรก็ตาม มันไม่มีเหตุผลที่จะคาดหวังว่าจะมีรูปแบบเป็นคู่ที่สมบูรณ์แบบ
กับภาพวัตถุโลกเป็นภาพที่เหมือนกันหลายอย่าง

เคยถูกจับกริบไม่ว่าขนาดใหญ่ข้อมูล . ดังนั้น ข้อเสนอแนวทางของเราด้วย

หลายประเภทที่ไม่ตรงกันระหว่างถ่ายภาพวัตถุและหุ้นแบบจำลอง 3 มิติ :
ไม่ตรงกันทางเรขาคณิต น่าสนใจ แม้ในมาตรฐาน แบรนด์ของใช้ในครัวเรือน massproduced
( เช่นขวดผงซักฟอก ) มักจะมี
สีสันเรขาคณิตผันเป็นผู้ผลิตปรับแต่งรูปร่างของ
ผลิตภัณฑ์ของตน แน่นอน สำหรับวัตถุธรรมชาติ ( เช่น กล้วย ) ,
เรขาคณิตของแต่ละรายจะแตกต่างกันเล็กน้อย แม้ใน
กรณีเมื่อจับคู่ที่สมบูรณ์แบบอาจจะพบได้ เช่น รถยนต์เฉพาะ
ยี่ห้อ รุ่น และปี ) , แบบจำลอง 3 มิติมากมายถูกสร้างขึ้นด้วยศิลปะ
ใบอนุญาตและเรขาคณิตของพวกเขาอาจจะไม่แม่นยำเมตริก หรือมีข้อผิดพลาดเนื่องจากการสแกน
.
ภาวะไม่ตรงกัน แม้ว่าทั้งศิลปินและสแกนเทคนิค
มักจะให้รายละเอียดของวัตถุ ( สะท้อน
ลักษณะพื้นผิว ) , คำอธิบายเหล่านี้อาจไม่ตรงกับสี
และพื้นผิว ( และอายุ และสภาพดินฟ้าอากาศที่มีเฉพาะ
) ของตัวอย่างของวัตถุในรูป
ตรงกัน รัศมี แสดงการเชิดหุ่นสมจริงใน
3 มิติ เราต้องสร้างผลแสงที่น่าเชื่อถือ เช่น เงา
บนวัตถุและพื้นผิวสัมผัส สภาพแวดล้อมแสง
ที่สร้างผลกระทบเหล่านี้ไม่เป็นที่รู้จัก priori และผู้ใช้อาจ
ไม่สามารถเข้าถึงฉากต้นฉบับเพื่อใช้ส่องสว่างการวัด
( เช่นในสภาพแวดล้อมแบบไดนามิกหรือภาพถ่ายมรดก ) .
วิธีการของเราที่ใช้ข้อมูลพิกเซลในส่วนที่มองเห็นของวัตถุให้ถูกต้อง
3 แหล่งไม่ตรงกัน ผู้ใช้ semiautomatically
จัดหุ้นแบบจำลอง 3 มิติเพื่อรูปถ่ายโดยใช้เรขาคณิตแก้ไขอินเตอร์เฟซที่รักษาการ
-
สมมาตรในวัตถุ ใช้ชิดรูปแบบและภาพถ่าย
วิธีการของเราโดยอัตโนมัติประมาณการส่องสว่างสิ่งแวดล้อมและข้อมูลลักษณะ
ในส่วนที่ซ่อนวัตถุ และในขณะที่ถ่ายภาพ
แบบจำลอง 3 มิติ อาจยังไม่ประกอบด้วยข้อมูลทั้งหมดที่จำเป็น
แน่นอนสร้างฉาก วิธีการของเราเพียงพอกับ
รัศมี เรขาคณิต และลักษณะที่ปรากฏของวัตถุและฉากเพื่อผลิตต้นแบบ

เสร็จมาเปิดพื้นที่ แน่นอนที่แสดงโดยผู้ใช้ศึกษาในมาตรา 8
วิธีการของเรายังคงพบพื้นที่ที่ซ่อนของการจัดการวัตถุ
ความสามารถในการจัดการวัตถุใน 3D ในขณะที่รักษาความสมจริง
ช่วยขยายความละครของ manipulations สร้างสรรค์ที่สามารถ
ได้บนรูปถ่าย ผู้ใช้สามารถที่จะได้อย่างรวดเร็วแสดงภาพเคลื่อนไหวที่ระดับ
วัตถุจะใช้เวลานาน หรือเพียงเป็นไปไม่ได้
ใน 2 มิติ เช่นจากเพียงหนึ่งภาพ ผู้ใช้สามารถ
เพราะรถคุณยายดำเนินการ backflip และปลอมเป็นเด็กยก
โซฟาหนา เราผูกวิธีการมาตรฐานและซอฟต์แวร์ภาพเคลื่อนไหว
มองวัตถุจากภาพถ่ายเดี่ยว ในวิธีนี้
เราอีกว่าปกติ Photoshop แก้ไขเช่นวัตถุหมุน
แปล rescaling เสียรูป และคัดลอกวางเป็นวัตถุ
ตกแต่งใน 3 มิติและช่วยให้ผู้ใช้โดยตรงแปล
สิ่งที่พวกเขาวาดภาพในสิ่งที่พวกเขาสามารถสร้าง .
ผลงาน ผลงานสำคัญของเราเป็นวิธีการที่ช่วยให้เครื่องบิน 3D
จากการจัดการของวัตถุในรูปของผู้บริโภค
ในขณะที่ให้พักรอยต่อจากภาพต้นฉบับ ทำ
ดังนั้นวิธีการของเรายกระดับสมมาตรทางวัตถุและ
โดยประมาณไม่ใหม่ของพารามิเตอร์ของแบบจำลองของแสงเป็นลักษณะ
เสร็จส่วนวัตถุที่ซ่อนและส่องสว่างทราบ compositing จัดการ
ของวัตถุลงในรูปภาพ เราไม่ทำให้สมมติฐาน
บนโครงสร้างหรือลักษณะของวัตถุที่ถูกควบคุม
นอกเหนือจากความจริงที่ว่าเป็นแบบจำลอง 3D ประมาณใช้ได้ .
ข้อสมมติ ในกระดาษนี้เราถือว่าเป็นรูปแบบของ lambertian
รัศมีเราไม่ได้รูปแบบคุณสมบัติของวัสดุ เช่น การหักเหของแสง