For example, human skin color varie

For example, human skin color varies slightly with blood circulation.
This variation, while invisible to the naked eye, can be exploited
to extract pulse rate [Verkruysse et al. 2008; Poh et al. 2010;
Philips 2011]. Similarly, motion with low spatial amplitude, while
hard or impossible for humans to see, can be magnified to reveal
interesting mechanical behavior [Liu et al. 2005]. The success of
these tools motivates the development of new techniques to reveal
invisible signals in videos. In this paper, we show that a combination
of spatial and temporal processing of videos can amplify subtle
variations that reveal important aspects of the world around us.
Our basic approach is to consider the time series of color values at
any spatial location (pixel) and amplify variation in a given temporal
frequency band of interest. For example, in Figure 1 we automatically
select, and then amplify, a band of temporal frequencies
that includes plausible human heart rates. The amplification reveals
the variation of redness as blood flows through the face. For this
application, temporal filtering needs to be applied to lower spatial
frequencies (spatial pooling) to allow such a subtle input signal to
rise above the camera sensor and quantization noise.
Our temporal filtering approach not only amplifies color variation,
but can also reveal low-amplitude motion. For example, in the supplemental
video, we show that we can enhance the subtle motions
around the chest of a breathing baby. We provide a mathematical
analysis that explains how temporal filtering interplays with spatial
motion in videos. Our analysis relies on a linear approximation related
to the brightness constancy assumption used in optical flow
formulations. We also derive the conditions under which this approximation
holds. This leads to a multiscale approach to magnify
motion without feature tracking or motion estimation.
Previous attempts have been made to unveil imperceptible motions
in videos. [Liu et al. 2005] analyze and amplify subtle motions and
visualize deformations that would otherwise be invisible. [Wang
et al. 2006] propose using the Cartoon Animation Filter to create
perceptually appealing motion exaggeration. These approaches follow
a Lagrangian perspective, in reference to fluid dynamics where
the trajectory of particles is tracked over time. As such, they rely

ผลลัพธ์ (ไทย) 1:

เช่น สีผิวมนุษย์แตกต่างกันเล็กน้อยกับเลือดเปลี่ยนแปลงนี้ ในขณะที่มองไม่เห็นตาเปล่า สามารถใช้ประโยชน์การแยกอัตราชีพจร [Verkruysse et al. 2008 พ่อ et al. 2010Philips 2011] ในทำนองเดียวกัน การเคลื่อนไหว ด้วยคลื่น spatial ต่ำ ขณะที่ยาก หรือเป็นไปไม่ได้สำหรับมนุษย์ดู ขยายให้เหมาะกับพฤติกรรมทางกลน่าสนใจ [Liu et al. 2005] ความสำเร็จของเครื่องมือเหล่านี้จูงการพัฒนาเทคนิคใหม่ในการเปิดเผยสัญญาณที่มองไม่เห็นในวิดีโอ ในกระดาษนี้ เราแสดงที่ผสมผสานการประมวลผลเชิงพื้นที่ และกาลเวลาของวิดีโอสามารถขยายลึกซึ้งการเปลี่ยนแปลงที่สำคัญของโลกรอบตัวเราวิธีการพื้นฐานของเราคือการ พิจารณาอนุกรมเวลาของค่าสีที่ตำแหน่งเชิงพื้นที่ (พิกเซล) และขยายความผันแปรในการกำหนดกาลเวลาย่านความถี่ที่น่าสนใจ ตัวอย่างเช่น ในรูปที่ 1 เราโดยอัตโนมัติเลือก และ ขยายแล้ว วงดนตรีความถี่ชั่วขณะที่มีอัตราหัวใจมนุษย์เป็นไปได้ เผยขยายการเปลี่ยนแปลงของสีแดงเป็นเลือดที่ไหลผ่านหน้า สำหรับเรื่องนี้กรองกาลเวลาต้องการใช้เพื่อลดพื้นที่ความถี่ (เชิงพื้นที่ร่วมกัน) เพื่อให้สัญญาณเข้าที่ละเอียดอ่อนดังกล่าวที่จะขึ้นเหนือเสียง quantization และเซ็นเซอร์กล้องวิธีการกรองของเราชั่วคราวไม่เพียงแต่เพิ่มสีแต่ยังสามารถเผยแอมพลิจูเคลื่อนไหว ตัวอย่าง ในการเพิ่มเติมวิดีโอ เราแสดงว่า เราสามารถเพิ่มการเคลื่อนไหวที่ละเอียดอ่อนรอบหน้าอกเด็กทารกหายใจ เราให้บริการในทางคณิตศาสตร์วิเคราะห์อธิบายขมับวิธีการกรอง interplays กับปริภูมิเคลื่อนไหวในวิดีโอ การวิเคราะห์ของเราอาศัยการประมาณเชิงเส้นที่เกี่ยวข้องการสันนิษฐานความมั่นคงความสว่างใช้ในกระแสออปติคอลสูตร นอกจากนี้เรายังได้รับเงื่อนไขตามที่ประมาณวาง นี้นำไปสู่แนวทาง multiscale เพื่อขยายเคลื่อนไหว โดยไม่มีการประเมินคุณลักษณะการติดตามหรือการเคลื่อนไหวความพยายามก่อนหน้านี้ได้มีการเผยภาพเคลื่อนไหวเล็กน้อยในวิดีโอ [Liu et al. 2005] วิเคราะห์ และขยายการเคลื่อนไหวที่ละเอียดอ่อน และเห็นภาพพิการที่อื่นจะมองไม่เห็น [วังet al. 2006] เสนอใช้ตัวกรองภาพเคลื่อนไหวการ์ตูนพูดเคลื่อนไหวที่น่าสนใจ perceptually ทำตามวิธีการเหล่านี้มองลากรองจ์ อ้างอิงถึงพลศาสตร์ของไหลที่วิถีของอนุภาคการติดตามตลอดเวลา ดังนี้ พวกเขาอาศัย

ผลลัพธ์ (ไทย) 2:

ยกตัวอย่างเช่นสีผิวของมนุษย์แตกต่างกันเล็กน้อยกับการไหลเวียนโลหิต.
รูปแบบนี้ในขณะที่มองไม่เห็นด้วยตาเปล่าสามารถใช้ประโยชน์
เพื่อดึงอัตราชีพจร [Verkruysse et al, 2008 Poh et al, 2010
ฟิลิปส์ 2011] ในทำนองเดียวกันการเคลื่อนไหวที่มีความกว้างเชิงพื้นที่ต่ำในขณะที่
ยากหรือเป็นไปไม่ได้สำหรับมนุษย์ที่จะเห็นสามารถขยายที่จะเปิดเผย
พฤติกรรมทางกลที่น่าสนใจ [Liu et al, 2005] ความสำเร็จของ
เครื่องมือเหล่านี้กระตุ้นการพัฒนาเทคนิคใหม่ที่จะแสดง
สัญญาณที่มองไม่เห็นในวิดีโอ ในบทความนี้เราจะแสดงให้เห็นว่าการรวมกัน
ของการประมวลผลเชิงพื้นที่และเวลาของวิดีโอที่สามารถขยายบอบบาง
รูปแบบที่เปิดเผยแง่มุมที่สำคัญของโลกรอบตัวเรา.
วิธีการขั้นพื้นฐานของเราคือการพิจารณาอนุกรมเวลาของค่าสีที่
ตำแหน่งพื้นที่ใด ๆ (พิกเซล) และ ขยายการเปลี่ยนแปลงในชั่วขณะที่กำหนด
คลื่นความถี่ที่น่าสนใจ ยกตัวอย่างเช่นในรูปที่ 1 เราจะ
เลือกและจากนั้นขยายเป็นวงดนตรีของความถี่ชั่วคราว
ที่มีอัตราที่น่าเชื่อถือหัวใจมนุษย์ ขยายเผยให้เห็น
การเปลี่ยนแปลงของสีแดงเลือดไหลผ่านใบหน้า สำหรับเรื่องนี้
แอพลิเคชันการกรองชั่วความต้องการที่จะนำไปใช้ในเชิงพื้นที่ที่ต่ำกว่า
ความถี่ (รวมกำไรเชิงพื้นที่) เพื่อให้การดังกล่าวเป็นสัญญาณอินพุตที่ลึกซึ้งที่จะ
ขึ้นเหนือเซ็นเซอร์กล้องและเสียง quantization.
กรองวิธีการชั่วคราวของเราไม่เพียง แต่ขยายรูปแบบสี,
แต่ยังสามารถที่จะเปิดเผยต่ำ การเคลื่อนไหว -amplitude ยกตัวอย่างเช่นในเสริม
วิดีโอที่เราแสดงให้เห็นว่าเราสามารถเพิ่มการเคลื่อนไหวที่บอบบาง
รอบหน้าอกของทารกหายใจ เราให้บริการทางคณิตศาสตร์
การวิเคราะห์ที่อธิบายถึงวิธีการต่างก็กรองขมับกับเชิงพื้นที่
การเคลื่อนไหวในวิดีโอ การวิเคราะห์ของเราต้องอาศัยการประมาณเชิงเส้นที่เกี่ยวข้องกับ
สมมติฐานความสว่างความมั่นคงที่ใช้ในการไหลเวียนของออปติคอล
สูตร นอกจากนี้เรายังได้รับมาภายใต้เงื่อนไขที่ประมาณนี้
ถือ นี้นำไปสู่วิธีการ Multiscale เพื่อขยาย
การเคลื่อนไหวโดยไม่ต้องติดตามคุณสมบัติหรือการประมาณค่าการเคลื่อนไหว.
พยายามก่อนหน้านี้ได้รับการเปิดเผยการเคลื่อนไหวที่มองไม่เห็น
ในวิดีโอ [Liu et al, 2005] วิเคราะห์และขยายการเคลื่อนไหวละเอียดและ
เห็นภาพรูปร่างที่มิฉะนั้นจะมองไม่เห็น [วัง
et al, 2006] เสนอโดยใช้ตัวกรองการ์ตูนแอนิเมชั่เพื่อสร้าง
การพูดเกินจริงการเคลื่อนไหวที่น่าสนใจ perceptually วิธีการเหล่านี้เป็นไปตาม
มุมมองของลากรองจ์ในการอ้างอิงถึงพลศาสตร์ของไหลที่
เส้นทางการเคลื่อนที่ของอนุภาคมีการติดตามอยู่ตลอดเวลา เช่นนี้พวกเขาต้องพึ่งพา

ผลลัพธ์ (ไทย) 3:

ตัวอย่างเช่น สีผิวของมนุษย์แตกต่างกันเล็กน้อยกับการไหลเวียนโลหิตการเปลี่ยนแปลงนี้ในขณะที่ตาเปล่ามองไม่เห็น จะเอาเปรียบเพื่อสกัดชีพจร [ verkruysse et al . 2008 ; โพธิ์ et al . 2010ฟิลิปส์ 2011 ] ในทํานองเดียวกัน เคลื่อนไหวด้วยขนาดพื้นที่น้อย ในขณะที่ยากหรือเป็นไปไม่ได้สำหรับมนุษย์ที่จะเห็น สามารถขยายได้ เปิดเผยพฤติกรรม [ กลน่าสนใจ Liu et al . 2548 ] ความสำเร็จของเครื่องมือเหล่านี้กระตุ้นการพัฒนาเทคนิคใหม่ในการเปิดเผยมองไม่เห็นสัญญาณวิดีโอ ในกระดาษนี้เราแสดงให้เห็นว่าการรวมกันของพื้นที่และเวลาของการประมวลผลวิดีโอที่สามารถขยาย บอบบางการเปลี่ยนแปลงที่แสดงลักษณะสำคัญของโลกรอบตัวเราแนวทางพื้นฐานของเราคือการพิจารณาเวลาที่ชุดของค่าสีในพื้นที่ใด ๆสถานที่ ( พิกเซล ) และขยายการกำหนดกาลย่านความถี่ของดอกเบี้ย ตัวอย่างเช่น ในรูปที่ 1 เราโดยอัตโนมัติเลือก และจากนั้น ขยาย เป็นคลื่นความถี่ชั่วคราวรวมถึงอัตราหัวใจมนุษย์สัมพันธ์ โดยการเพิ่ม เผยการเปลี่ยนแปลงของสีแดงเป็นเลือดที่ไหลผ่านหน้า สำหรับนี้โปรแกรมกรองและควรจะใช้เพื่อลดพื้นที่ความถี่ ( เชิงพื้นที่ร่วมกัน ) เพื่อให้ข้อมูลที่ลึกซึ้งเช่นสัญญาณการเพิ่มขึ้นดังกล่าวข้างต้นเสียงกล้องเซ็นเซอร์และอาศัยของเราไม่เพียง แต่ขยายรูปแบบวิธีการและกรองสีแต่ยังสามารถเปิดเผยความเคลื่อนไหวน้อย ตัวอย่างเช่น ในการเสริมวิดีโอที่เราแสดงให้เห็นว่าเราสามารถเพิ่มภาพเคลื่อนไหวบอบบางรอบหน้าอกของการหายใจของทารก เราให้บริการทางวิเคราะห์ว่า อธิบายว่า เวลา interplays กับพื้นที่การกรองภาพเคลื่อนไหวในวิดีโอ การวิเคราะห์ของเราอาศัยเส้นการประมาณที่เกี่ยวข้องเพื่อใช้ในการไหลของแสง ความสว่าง อัสสัมชัญ ความจงรักภักดีสูตร . นอกจากนี้เรายังรับสภาพที่ประมาณนี้ถือ นี้จะนำไปสู่วิธีการ multiscale ขยายเคลื่อนไหวโดยไม่มีการติดตาม หรือการเคลื่อนไหวความพยายามก่อนหน้านี้ได้เผยมองไม่เห็นการเคลื่อนไหวในวิดีโอ [ Liu et al . 2005 ] วิเคราะห์ และเพิ่มสีสันและภาพเคลื่อนไหวเห็นรูปที่มิฉะนั้นจะมองไม่เห็น [ วังet al . 2006 ] เสนอโดยใช้การ์ตูนแอนนิเมชั่น กรอง เพื่อ สร้างรับรูดูด การเคลื่อนไหวที่พูดเกินจริง วิธีเหล่านี้ตามระบบมุมมอง เพื่ออ้างอิงในพลศาสตร์ของเหลวที่วงโคจรของอนุภาคติดตามตลอดเวลา เช่นที่พวกเขาพึ่งพา