2. Stereo Vision CameraWhen a stere

2. Stereo Vision Camera
When a stereo vision system is used to compute depth information, the sensor dynamic range and reactivity become
critical because in saturated areas the contrast is lost and depth extraction is not possible. A stereo vision system has
been developed to address those issues.
At the core of this camera we find 2 B&W WDR NSC1005 logarithmic sensors that are slaves to the same controller.
The general specifications of the sensors are given by figure 1. The NSC1005 can deliver constant contrast
sensitivity over 140 dB of dynamic range. Both sensors differential analog outputs are connected to 12 bits differential
ADCs. In this design a FPGA generates all the sensors control signals (Vsync, Vck, Hsync, Hck, RST, RD1 and RD2)
for both sensors resulting in a pixel level synchronization. The digitized left and right pixels levels are then sent to the
FPGA. The FPGA will pack the 12 bits left and right channels to create a single 24 bits channel that is sent to a host
PC (see fig. 2).
Thanks to the dynamic range provided by both logarithmic sensors, it is possible to set the exposure time and the
frame rate at fixed values without risk of saturation. This means that gain and exposure time control becomes very
simple for stereo vision systems. The wide dynamic range provided within a single frame for the 2 sensors makes
the stereo vision system very robust to non-uniform illumination, specular reflections and fast temporal illumination
changes. For example, in this stereo system design, the frame rate can be set to 25 or 30 Hz, the exposure time is set
to the maximum possible value (the frame rate period) and the sensors gain are set from the host PC to the same value
for both sensors. Another interesting property of logarithmic sensors is that contrast will be identical in areas seen by
both left and right sensors regardless of the illumination intensity on both sensors. This property is important if we
consider the stereo matching process that relies on contrast information.
3. System Performance
In order to operate the stereo vision system, a companion software was developed to perform the stereo calibration
and the rectification processes. The stereo calibration module implements a camera calibration algorithm based on
corner extraction from chessboard chart images 3,4 to correct both sensor modules distortions. Using the same sets
of points the calibration module also computes the essential matrix, the fundamental matrix, the rotation matrix
between the left and the right camera coordinate systems and the translation vector between the coordinate systems
of the cameras. Finally the left and right images are rectified using Bouguet algorithm4. With this implementation

ผลลัพธ์ (ไทย) 1:

2. วิสัยทัศน์สเตอริโอกล้องเมื่อใช้ระบบสเตอริโอวิสัยทัศน์ในการคำนวณข้อมูลลึก เซ็นเซอร์ช่วงแบบไดนามิก และเกิดปฏิกิริยากลายเป็นความสำคัญเนื่องจากในบริเวณอิ่มตัว ความคมชัดหายไป และลึกแยกเป็นไปไม่ได้ ระบบสเตอริโอวิสัยทัศน์ได้การพัฒนาประเด็นของกล้องตัวนี้ เราพบ 2 B & W WDR NSC1005 ลอการิทึมเซ็นเซอร์ที่ทาสกับตัวควบคุมเดียวกันคุณสมบัติทั่วไปของเซนเซอร์ได้ตามรูป 1 NSC1005 สามารถให้ความคมชัดคงไวกว่า 140 dB ของช่วงแบบไดนามิก เชื่อมต่อเซนเซอร์ทั้งแสดงผลแบบแอนะล็อกส่วน 12 บิตที่แตกต่างADCs ในการออกแบบนี้สร้าง FPGA เซ็นเซอร์ทั้งหมดควบคุมสัญญาณ (Vsync, Vck, Hsync, Hck, RST, RD1 และ RD2)สำหรับเซนเซอร์ทั้งสองเกิดในตรงระดับพิกเซล ระดับพิกเซลซ้าย และขวาดิจิทัลแล้วส่งไปFPGA FPGA จะรวบรวมบิต 12 ช่องซ้าย และขวาเพื่อสร้างช่องสัญญาณเดียว 24 บิตที่ถูกส่งไปยังโฮสต์PC (ดู fig. 2)ด้วยช่วงแบบไดนามิกโดยเซ็นเซอร์ทั้งลอการิทึม เป็นการตั้งเวลาถ่ายภาพและอัตราเฟรมที่ค่าคงที่โดยไม่มีความเสี่ยงของความเข้ม ซึ่งหมายความ ว่า กำไรและความเสี่ยงการควบคุมเวลามากอย่างง่ายสำหรับระบบสเตอริโอวิสัยทัศน์ ทำให้ช่วงกว้างไดนามิกที่ให้ไว้ภายในเฟรมเดียวสำหรับเซนเซอร์ 2วิสัยทัศน์สเตอริโอระบบแข็งแกร่งมากที่แสงสว่างไม่สม่ำเสมอ สะท้อนแสงสะท้อนแบบกระจก และแสงสว่างชั่วคราวอย่างรวดเร็วการเปลี่ยนแปลง ตัวอย่าง แบบนี้ระบบสเตอริโอ สามารถตั้งค่าอัตราเฟรม 25 หรือ 30 Hz ตั้งเวลาถ่ายภาพค่าสูงสุดที่เป็นไปได้ (กรอบอัตราระยะเวลา) และเซนเซอร์ ตั้งกำไรจากโฮสต์คอมพิวเตอร์จะสำหรับเซนเซอร์ทั้งสอง คุณสมบัติอื่น ๆ ที่น่าสนใจของเซ็นเซอร์ลอการิทึมคือ ความคมชัดจะเป็นเหมือนในพื้นที่เห็นด้วยเซนเซอร์ทั้งซ้าย และขวา โดยความเข้มแสงสว่างในเซนเซอร์ทั้งสอง นี่เป็นสิ่งสำคัญถ้าเราพิจารณาสเตอริโอที่กระบวนการที่อาศัยข้อมูลความแตกต่างของการจับคู่3. ผลการมีวิสัยทัศน์สเตอริโอระบบ ซอฟต์แวร์เป็นตัวช่วยได้รับการพัฒนาเพื่อทำการปรับเทียบเสียงและกระบวนการกำหนด โมดูเทียบสเตอริโอใช้กับกล้องเทียบอัลกอริทึมตามมุมแยกจากแผนภูมิกระดานหมากรุกในรูป 3, 4 ต้องบิดเบือนทั้งเซนเซอร์โมดูล ใช้ชุดเดียวกันคะแนน โมเทียบยังจะจำเป็นเมตริกซ์ เมตริกซ์พื้นฐาน เมตริกซ์การหมุนระหว่างด้านซ้าย และเวกเตอร์แปลระหว่างระบบพิกัดระบบพิกัดเหมาะสมของกล้อง ภาพซ้าย และขวาสุด จะแก้ไขใช้ Bouguet algorithm4 กับงานนี้

ผลลัพธ์ (ไทย) 2:

2. วิสัยทัศน์กล้องสเตอริโอเมื่อระบบการมองเห็นสเตอริโอจะใช้ในการคำนวณข้อมูลเชิงลึกช่วงไดนามิกเซ็นเซอร์และการเกิดปฏิกิริยากลายเป็นสิ่งสำคัญเนื่องจากในพื้นที่อิ่มตัวความคมชัดจะหายไปและการสกัดความลึกเป็นไปไม่ได้ ระบบวิสัยทัศน์สเตอริโอได้รับการพัฒนาเพื่อแก้ไขปัญหาเหล่านั้น. ที่แกนหลักของกล้องนี้ที่เราพบ 2 B & W WDR NSC1005 เซ็นเซอร์ลอการิทึมที่มีทาสควบคุมเดียวกัน. ข้อกำหนดทั่วไปของเซ็นเซอร์จะได้รับจากรูปที่ 1 NSC1005 สามารถส่งมอบ คมชัดคงที่ไวกว่า140 เดซิเบลในช่วงแบบไดนามิก ทั้งสองแตกต่างกันเซ็นเซอร์แบบอะนาล็อกเอาท์พุทที่มีการเชื่อมต่อกับ 12 บิตที่แตกต่างกันADCs ในการออกแบบนี้ FPGA สร้างสัญญาณทั้งหมดที่ควบคุมเซ็นเซอร์ (Vsync, VCK, Hsync, HCK, RST, RD1 และ RD2) สำหรับเซ็นเซอร์ทั้งส่งผลในการประสานระดับพิกเซล พิกเซลดิจิทัลซ้ายและขวาระดับจะถูกส่งไปยังFPGA FPGA จะแพ็ค 12 บิตช่องซ้ายและขวาเพื่อสร้างเดียว 24 บิตช่องทางที่ถูกส่งไปยังโฮสต์พีซี (ดูรูปที่. 2). ขอบคุณที่ช่วงแบบไดนามิกที่มีให้โดยเซ็นเซอร์ทั้งลอการิทึมก็เป็นไปได้ที่จะตั้งค่าการเปิดรับแสง เวลาและอัตราเฟรมที่ค่าคงที่ไม่มีความเสี่ยงของความอิ่มตัว ซึ่งหมายความว่ากำไรและควบคุมเวลาการเปิดรับจะกลายเป็นมากง่ายสำหรับระบบการมองเห็นสเตอริโอ ช่วงไดนามิกกว้างให้ภายในกรอบเดียวสำหรับ 2 เซ็นเซอร์ทำให้ระบบสเตอริโอวิสัยทัศน์มากที่มีประสิทธิภาพเพื่อการส่องสว่างไม่สม่ำเสมอสะท้อนกระจกเงาและไฟส่องสว่างชั่วอย่างรวดเร็วการเปลี่ยนแปลง ยกตัวอย่างเช่นในการออกแบบระบบสเตอริโอนี้อัตราเฟรมสามารถกำหนดให้ 25 หรือ 30 เฮิร์ตซ์, เวลาที่ได้รับการตั้งค่าให้เป็นค่าเป็นไปได้สูงสุด(ระยะเวลาที่อัตราเฟรม) และได้รับการเซ็นเซอร์มีการตั้งค่าจากคอมพิวเตอร์โฮสต์เดียวกัน ค่าเซ็นเซอร์ทั้งสอง อีกสถานที่ที่น่าสนใจของเซ็นเซอร์ลอการิทึมคือความคมชัดจะเหมือนกันในพื้นที่ที่มองเห็นได้ด้วยทั้งเซ็นเซอร์ซ้ายและขวาโดยไม่คำนึงถึงความเข้มของการส่องสว่างบนเซ็นเซอร์ทั้งสอง สถานที่แห่งนี้เป็นสิ่งสำคัญหากเราพิจารณาขั้นตอนการจับคู่แบบสเตอริโอที่อาศัยข้อมูลทางตรงกันข้าม. 3 ประสิทธิภาพของระบบเพื่อที่จะดำเนินการระบบการมองเห็นสเตอริโอ, ซอฟแวร์สหายที่ได้รับการพัฒนาที่จะดำเนินการสอบเทียบสเตอริโอและกระบวนการสัตยาบัน โมดูลการสอบเทียบสเตอริโอดำเนินการขั้นตอนวิธีการสอบเทียบกล้องอยู่บนพื้นฐานของการสกัดมุมจากภาพแผนภูมิกระดานหมากรุก 3,4 เพื่อแก้ไขบิดเบือนทั้งโมดูลเซ็นเซอร์ การใช้ชุดเดียวกันของจุดโมดูลการสอบเทียบยังคำนวณเมทริกซ์ที่จำเป็นพื้นฐานเมทริกซ์, เมทริกซ์หมุนระหว่างซ้ายและกล้องที่เหมาะสมระบบพิกัดเวกเตอร์และการแปลระหว่างระบบพิกัดของกล้อง สุดท้ายภาพซ้ายและขวาที่มีการแก้ไขโดยใช้ Bouguet algorithm4 กับการดำเนินการนี้

ผลลัพธ์ (ไทย) 3:

2 . สเตอริโอกล้องวิสัยทัศน์
เมื่อวิสัยทัศน์ระบบสเตอริโอที่ใช้คำนวณข้อมูลความลึก เซนเซอร์แบบไดนามิกช่วงเกิดวิกฤตและกลายเป็น
เพราะในบริเวณอิ่มตัวความคมชัดจะหายไปและการสกัดความลึกไม่อาจเป็นไปได้ วิสัยทัศน์ระบบสเตอริโอที่ได้ถูกพัฒนาขึ้นเพื่อจัดการกับปัญหาเหล่านั้น

.ที่หลักของกล้องนี้เราพบ 2 B & W WDR nsc1005 ลอการิทึมเซ็นเซอร์ที่เป็นทาสของตัวควบคุมเดียวกัน .
ข้อกําหนดทั่วไปของเซ็นเซอร์ จะได้รับ โดยรูปที่ 1 การ nsc1005 สามารถส่งมอบความคมชัด
คงที่กว่า 140 db ของช่วงแบบไดนามิก เซ็นเซอร์ทั้งสองแบบอนาล็อกเอาท์พุทเชื่อมต่อกับ 12 บิตค่า
adcs .ในการออกแบบนี้ FPGA ทั้งหมดสร้างเซ็นเซอร์สัญญาณควบคุม ( VSync vck hsync hck , , , , และ RST , rd1 rd2 )
สำหรับเซ็นเซอร์ทั้งสองเป็นผลในระดับพิกเซลประสาน ดิจิทัลซ้ายและขวาพิกเซลระดับแล้วส่งไปยัง
FPGA ออกแบบจะแพ็ค 12 บิตช่องทางซ้ายและขวาเพื่อสร้างช่องทางเดียว 24 บิตที่ถูกส่งไปยังโฮสต์
เครื่องคอมพิวเตอร์ ( ดูรูปที่ 2 ) .
ขอบคุณกับ Dynamic Range โดยทั้งลอการิทึม เซ็นเซอร์ มันเป็นไปได้ที่จะตั้งค่าเวลาและอัตราที่คงที่ค่า
กรอบโดยไม่ต้องเสี่ยงของความอิ่มตัว ซึ่งหมายความว่าได้รับและเวลาเปิดรับแสงควบคุมกลายเป็นมาก
ง่ายๆสำหรับวิสัยทัศน์ระบบสเตอริโอ ช่วงกว้างไดนามิกไว้ภายในกรอบเดียวสำหรับเซ็นเซอร์ทำให้
2ระบบสเตอริโอวิสัยทัศน์มากที่สุดไม่สม่ำเสมอรัศมี การสะท้อน specular และรวดเร็วชั่วคราวรัศมี
เปลี่ยนแปลง ตัวอย่างเช่น ในระบบสเตอริโอแบบอัตราเฟรมสามารถตั้งค่าได้ถึง 25 หรือ 30 Hz แสงเวลาตั้งค่า
ที่จะเป็นไปได้สูงสุดค่า ( กรอบอัตราระยะเวลา ) และเซ็นเซอร์ได้ชุดจากโฮสต์คอมพิวเตอร์
ค่าเดียวกันทั้งเซ็นเซอร์อีกคุณสมบัติที่น่าสนใจของเซ็นเซอร์ลอการิทึมคือ ความคมชัดจะเหมือนกันในพื้นที่เห็น
ทั้งซ้ายและขวาไม่เซ็นเซอร์รัศมีความเข้มทั้งบนเซ็นเซอร์ คุณสมบัตินี้สำคัญมากถ้าเรา
พิจารณาสเตอริโอกระบวนการที่ต้องอาศัยข้อมูลที่ตรงกับความคมชัด .
3 ประสิทธิภาพของระบบ
เพื่อการทํางานของระบบ Vision สเตอริโอ ,สหายซอฟต์แวร์ที่ถูกพัฒนาขึ้นเพื่อดําเนินการสอบเทียบ
สเตอริโอและแก้ไขกระบวนการ เครื่องเสียงแบบโมดูลใช้กล้องสอบเทียบโดยอยู่บนพื้นฐานของการสกัดจากแผนภูมิภาพ
มุมกระดานหมากรุก , 4 ให้ถูกต้องทั้งเซนเซอร์โมดูลการบิดเบือน การใช้จุดเดียวกันชุดของโมดูลยังสอบเทียบ
คำนวณเมทริกซ์เมทริกซ์พื้นฐานความสําคัญการหมุนเมทริกซ์
ระหว่างด้านซ้ายและด้านขวาของกล้องระบบพิกัดและการแปล เวกเตอร์ ระหว่างระบบพิกัด
ของกล้อง ในที่สุด ซ้ายและขวาภาพจะแก้ไขการใช้เข็มกลัด algorithm4 . กับกิจกรรมนี้