We have shown that the use of selec

We have shown that the use of selective weighing based on saliency
offers a viable method of 2D/3D registration. Saliency-based
2D/3D registration utilising as little as one quarter of the image content
has been shown to achieve a comparable accuracy to traditional
correlation-based 2D/3D registration. Utilising eye tracking during
visual search tasks is a novel idea for determining visual saliency.
The feasibility of this approach has been demonstrated by acquiring
eye-tracking data from a group of volunteers, which was used as the
training data set in order to automatically determine salient features
in video frames, most of which have never been seen. Salient image
features were extracted based on an analysis of human visual
behaviour but without the use of domain-specific knowledge.
There are a number of factors that affect the quality of the derived
saliency maps, such as prior knowledge, expectation, the nature
of question being asked, number of volunteers, feature selection
and extraction, and the process of combining different human
visual search strategies. Furthermore, the completeness of the chosen
feature space library significantly influences the effectiveness
of this method. It is worth noting that in deriving the saliency map,
only one feature component selected from a large set of candidates
was utilised. Strategies for combining saliency maps [Itti and Koch
1999] can further enhance the quality of the system, improve immunity
to noise, and increase robustness to spurious eye movements.
It is also worth noting that the method for assessing the success rate
of the 2D/3D registration, although consistently applied, was based
on subjective observations.
It is known that individuals can employ different visual search
strategies for the same image, so the extraction of common visual
search behaviour is better realised by expanding the study population.
This should improve the robustness of the technique in the
face of spurious eye movements, and also enable the exploration of
how differences in experience level affect the quality of the saliency
map. Variations of the core technique for deriving saliency form another
avenue for future investigation. Although features based on
multi-scale contrast and Gabor filter response (Eqn.3) have been
shown to be important in biological vision systems, there exist alternative
approaches for generating saliency maps which utilise information
theory [J¨agersand 1993] and multiscale wavelets [Shokoufandeh
et al. 1999].
The experiments confirm that, in the case of no special lighting
model being adopted, contrast based saliency maps can improve
normalised cross-correlation as an image similarity measure
in 2D/3D registration. This showed that comparing images, using
features selected according to Gabor filter response, tended to be
more immune to lighting conditions. It must be noted, however, the
effectiveness of the normalised cross correlation measure in 2D/3D
registration depends greatly on how accurately one can model the
illumination conditions in the rendered images. One method by
which the convergence of the optimisation process can be significantly
improved is to employ a carefully tuned function that attenuates
reflected light intensity according to the distance from the light
source. In practice, however, the attenuation parameters may have
to be adjusted specific to each situation.
In summary, a first attempt of 2D/3D image registration using
observer derived saliency maps has been presented. It has been
demonstrated that implicit modelling of human visual search behaviour
can enhance computer vision

ผลลัพธ์ (ไทย) 1:

เราได้แสดงให้เห็นว่า การใช้งานชั่งตาม saliencyมีวิธีการทำงานได้ลงทะเบียน 2D/3D โดย saliencyลงทะเบียน 2D/3D โดยไตรมาสเพียงเป็นหนึ่งของเนื้อหารูปภาพได้รับการแสดงเพื่อความถูกต้องเทียบกับแบบดั้งเดิมความสัมพันธ์ตามทะเบียน 2D/3D ตาโดยการติดตามในระหว่างค้นหาภาพงานเป็นความคิดที่นวนิยายสำหรับกำหนดภาพ saliencyมีการสาธิตความเป็นไปได้ของวิธีการนี้ โดยการซื้อตาติดตามข้อมูลจากกลุ่มอาสาสมัคร ซึ่งถูกใช้เป็นชุดข้อมูลการฝึกอบรมเพื่อกำหนดคุณสมบัติเด่นโดยอัตโนมัติในเฟรมของวิดีโอ ซึ่งส่วนใหญ่ไม่เห็นด้วย ภาพเด่นคุณลักษณะถูกแยกตามการวิเคราะห์ของ visual มนุษย์พฤติกรรมแต่ ไม่ใช้ความรู้เฉพาะโดเมนมีปัจจัยที่มีผลต่อคุณภาพของที่ได้รับsaliency แผนที่ ความรู้เดิม คาดหวัง ธรรมชาติของถูกถาม คำถามจำนวนอาสาสมัคร เลือกลักษณะการทำงานและสกัด และขั้นตอนการรวมบุคคลที่แตกต่างกันกลยุทธ์การค้นหาภาพ นอกจากนี้ สมบูรณ์ของเลือกห้องสมุดพื้นที่คุณลักษณะอย่างมีนัยสำคัญมีผลต่อประสิทธิภาพวิธีนี้ มันมีค่าที่เห็นในแผนที่ saliency บริษัทฯส่วนประกอบลักษณะเดียวที่เลือกจากผู้สมัครจำนวนมากไม่ทันใจ กลยุทธ์สำหรับการรวมแผนที่ saliency [Itti และคอเพิ่มคุณภาพของระบบ 1999] สามารถเพิ่มเติม ปรับปรุงภูมิคุ้มกันเสียง และเพิ่มเสถียรภาพให้ตาปลอมเคลื่อนไหวมีเร็ว ๆ ที่วิธีการในการประเมินอัตราความสำเร็จทะเบียน 2D/3D แม้ใช้อย่างต่อเนื่อง ขึ้นอยู่กับในการสังเกตตามอัตวิสัยเป็นที่รู้จักกันว่า บุคคลที่สามารถใช้ค้นหาภาพที่แตกต่างกันกลยุทธ์สำหรับภาพเดียว เพื่อสกัด visual ทั่วไปค้นหาพฤติกรรมเองมีก็ยังคิดดีกว่า ด้วยการขยายประชากรศึกษานี้ควรปรับปรุงเสถียรภาพของเทคนิคในการหน้าของตาปลอมเคลื่อนไหว และยัง เปิดใช้งานการสำรวจวิธีความแตกต่างในประสบการณ์มีผลต่อระดับคุณภาพของการ saliencyแผนที่ รูปแบบของเทคนิคหลักสำหรับบริษัทฯ saliency แบบฟอร์มอื่นจุดนัดพบสำหรับการตรวจสอบในอนาคต แม้ว่าลักษณะการทำงานตามหลายขนาดความคมชัดและตอบสนองของตัวกรองกาบอร์ (Eqn.3)แสดงเป็นสำคัญในระบบชีวภาพวิสัยทัศน์ มีทางเลือกแนวทางสำหรับการสร้างแผนที่ saliency ซึ่งใช้ข้อมูลทฤษฎี [J¨agersand 1993] และ [Shokoufandeh multiscale waveletsร้อยเอ็ด al. 1999]การทดลองยืนยันว่า ในกรณีที่ไม่มีแสงสีเสียงรูปแบบการนำ saliency ตามแผนที่สามารถปรับปรุงความคมชัดความสัมพันธ์ระหว่าง normalised เป็นการวัดความคล้ายรูปในการลงทะเบียน 2D/3D นี้แสดงให้เห็นว่า การเปรียบเทียบภาพ ใช้คุณลักษณะที่เลือกตามการตอบสนองของตัวกรองกาบอร์ มีแนวโน้มที่จะภูมิคุ้มกันเพิ่มมากขึ้นกับสภาพแสง จะต้องบันทึก อย่างไรก็ตาม การประสิทธิภาพของการวัดความสัมพันธ์ระหว่าง normalised ใน 2D/3Dลงทะเบียนมากขึ้นอยู่กับความแม่นยำหนึ่งสามารถรูปแบบการสภาพแสงสว่างในภาพ rendered วิธีหนึ่งโดยซึ่งอาจเป็นการบรรจบกันของการเพิ่มประสิทธิภาพอย่างมากการปรับปรุงจะใช้ฟังก์ชันโปรดติดตามอย่างระมัดระวังที่ attenuatesความเข้มแสงสะท้อนตามระยะห่างจากไฟแหล่งที่มา ในทางปฏิบัติ ไร พารามิเตอร์อ่อนอาจที่จะปรับปรุงเฉพาะสำหรับแต่ละสถานการณ์ในสรุป ครั้งแรกของภาพ 2D/3D ลงทะเบียนใช้นักการมา saliency ได้ถูกนำเสนอแผนที่ จะได้รับแสดงว่าแบบจำลองนัยของพฤติกรรมมนุษย์ค้นหาภาพสามารถเพิ่มคอมพิวเตอร์วิทัศน์

ผลลัพธ์ (ไทย) 2:

เราได้แสดงให้เห็นว่าการใช้การชั่งน้ำหนักเลือกขึ้นอยู่กับ saliency
มีวิธีการทำงานได้จากการลงทะเบียน 2D / 3D Saliency ตาม
2D / 3D การลงทะเบียนการใช้เป็นเพียงหนึ่งในสี่ของเนื้อหาของภาพ
ได้รับการแสดงเพื่อให้บรรลุความถูกต้องเทียบเคียงกับแบบดั้งเดิม
ที่ใช้ความสัมพันธ์แบบ 2D / 3D ลงทะเบียน ติดตามตาทองในช่วง
งานค้นหาภาพเป็นความคิดใหม่สำหรับการกำหนด saliency ภาพ.
ความเป็นไปได้ของวิธีการนี้ได้รับการพิสูจน์โดยการรับ
ข้อมูลตาติดตามจากกลุ่มอาสาสมัครซึ่งถูกใช้เป็น
ชุดข้อมูลการฝึกอบรมเพื่อที่จะตรวจสอบโดยอัตโนมัติเด่น คุณสมบัติ
ในภาพวิดีโอซึ่งส่วนใหญ่ไม่เคยเห็น ภาพเด่น
คุณสมบัติถูกสกัดอยู่บนพื้นฐานของการวิเคราะห์ภาพของมนุษย์
พฤติกรรม แต่ไม่มีการใช้ความรู้เฉพาะโดเมน.
มีหลายปัจจัยที่ส่งผลกระทบต่อคุณภาพของการมาเป็น
แผนที่ saliency เช่นความรู้ก่อนคาดหวังธรรมชาติ
ของคำถาม คำถามที่ถูกถามจำนวนอาสาสมัครเลือกคุณลักษณะ
และการสกัดและขั้นตอนของการรวมที่แตกต่างกันของมนุษย์
กลยุทธ์การค้นหาภาพ นอกจากนี้ความสมบูรณ์ของการได้รับการแต่งตั้ง
ห้องสมุดพื้นที่คุณลักษณะอย่างมีนัยสำคัญที่มีอิทธิพลต่อประสิทธิผล
ของวิธีการนี้ มันเป็นที่น่าสังเกตว่าใน deriving แผนที่ saliency,
เพียงองค์ประกอบหนึ่งคุณลักษณะที่เลือกจากชุดใหญ่ของผู้สมัครที่
ถูกนำมาใช้ กลยุทธ์สำหรับการรวมแผนที่ saliency [อิทธิและ Koch
1999] ยังสามารถเพิ่มคุณภาพของระบบปรับปรุงภูมิต้านทาน
เสียงและความทนทานเพิ่มขึ้นถึงการเคลื่อนไหวของตาปลอม.
นอกจากนี้ยังเป็นที่น่าสังเกตว่าวิธีการในการประเมินอัตราความสำเร็จ
ของ 2D / ลงทะเบียน 3D แม้ว่านำมาใช้อย่างต่อเนื่องเป็นไปตาม
ข้อสังเกตอัตนัย.
มันเป็นที่รู้จักกันว่าบุคคลสามารถใช้การค้นหาที่แตกต่างกันภาพ
กลยุทธ์สำหรับภาพเดียวกันดังนั้นการสกัดภาพทั่วไป
พฤติกรรมค้นหาจะตระหนักดีขึ้นโดยการขยายตัวของประชากรการศึกษา.
นี้ควรปรับปรุง ความทนทานของเทคนิคใน
การเผชิญกับการเคลื่อนไหวของตาปลอมและยังช่วยให้การตรวจสอบข้อเท็จจริงของ
วิธีการที่แตกต่างในระดับประสบการณ์ส่งผลกระทบต่อคุณภาพของ saliency
แผนที่ รูปแบบของเทคนิคหลักสำหรับรูปแบบที่ได้รับ saliency อีก
ถนนสำหรับการตรวจสอบในอนาคต แม้ว่าคุณสมบัติที่อยู่บนพื้นฐานของ
ความคมชัดหลายขนาดและการตอบสนองกรองบอร์ (Eqn.3) ได้รับการ
แสดงให้เห็นว่ามีความสำคัญในระบบการมองเห็นทางชีวภาพมีอยู่ทางเลือก
วิธีการในการสร้างแผนที่ saliency ซึ่งใช้ประโยชน์จากข้อมูล
ทฤษฎี [J¨agersand 1993] และ wavelets Multiscale [ Shokoufandeh
และคณะ 1999].
การทดลองยืนยันว่าในกรณีของแสงพิเศษไม่มี
รูปแบบถูกนำคมชัดตามแผนที่ saliency สามารถปรับปรุง
ปกติข้ามความสัมพันธ์เป็นความคล้ายคลึงกันภาพวัด
ในการลงทะเบียน 2D / 3D นี้แสดงให้เห็นว่าการเปรียบเทียบภาพโดยใช้
คุณสมบัติที่เลือกได้ตามการตอบสนองบอกรองมักจะมี
ภูมิคุ้มกันมากขึ้นในสภาพแสง จะต้องมีการตั้งข้อสังเกต แต่
ประสิทธิภาพของการวัดความสัมพันธ์ข้ามปกติ 2D / 3D
ลงทะเบียนขึ้นอยู่กับวิธีการที่ถูกต้องหนึ่งสามารถจำลอง
สภาพการส่องสว่างในการแสดงผลภาพ วิธีการหนึ่งโดย
ที่บรรจบกันของการเพิ่มประสิทธิภาพอย่างมีนัยสำคัญสามารถ
ปรับปรุงให้ดีขึ้นคือการจ้างฟังก์ชั่นการปรับจูนอย่างรอบคอบว่าฉุน
สะท้อนให้เห็นถึงความเข้มของแสงตามระยะทางจากแสง
แหล่งที่มา อย่างไรก็ตามในทางปฏิบัติพารามิเตอร์ลดทอนอาจจะมี
การปรับที่เฉพาะเจาะจงกับแต่ละสถานการณ์.
ในการสรุปความพยายามครั้งแรกของ 2D / การลงทะเบียนภาพ 3 มิติโดยใช้
ผู้สังเกตการณ์ที่ได้รับแผนที่ saliency ได้รับการเสนอ มันได้รับการ
แสดงให้เห็นว่าการสร้างแบบจำลองโดยนัยของการค้นหาพฤติกรรมของมนุษย์ที่มองเห็น
สามารถเพิ่มประสิทธิภาพการมองเห็นของคอมพิวเตอร์

ผลลัพธ์ (ไทย) 3:

เราได้แสดงให้เห็นว่ามีการใช้เครื่องชั่งตามความเด่น
เลือกวิธีปฏิบัติแบบ 2D / 3D การลงทะเบียน ความเด่นจากการลงทะเบียน
2D / 3D ไตรมาสเล็กน้อยเป็นหนึ่งของภาพเนื้อหา
ได้รับการแสดงเพื่อให้บรรลุความถูกต้องใกล้เคียงกับแบบดั้งเดิมตาม
( 2D / 3D การลงทะเบียน การใช้สายตาใน
ติดตามการค้นหาภาพความคิดใหม่เพื่อกำหนดภาพความเด่น .
ความเป็นไปได้ของวิธีการนี้ได้ถูกแสดง โดยการรับ
ติดตามดูข้อมูลจากกลุ่มอาสาสมัคร ซึ่งเคยเป็น
ฝึกชุดข้อมูลโดยอัตโนมัติเพื่อให้ตรวจสอบคุณสมบัติเด่น
ในเฟรมวิดีโอ มากที่สุดที่เคยเห็นมา
ภาพเด่นคุณสมบัติสกัดจากการวิเคราะห์พฤติกรรมของ Visual
มนุษย์ แต่โดยไม่ต้องใช้ความรู้โดเมนที่เฉพาะเจาะจง
มีจำนวนของปัจจัยที่มีผลกระทบต่อคุณภาพของที่ได้มา
แผนที่ความเด่น เช่น ความรู้ ความคาดหวังก่อน ธรรมชาติ
คำถามที่ถูกถาม จำนวนอาสาสมัคร
เลือกคุณลักษณะและการสกัด และกระบวนการของการรวม
มนุษย์ต่างกลยุทธ์การค้นหาภาพ นอกจากนี้ ครบถ้วน เลือกคุณลักษณะพื้นที่ห้องสมุดอย่างมีนัยสำคัญมีอิทธิพลต่อ

ประสิทธิผลของวิธีนี้ เป็นมูลค่า noting ที่ 4 แผนที่ความเด่น
เดียว , คุณลักษณะองค์ประกอบที่เลือกจากชุดใหญ่ของผู้สมัคร
ถูกใช้ . กลยุทธ์สำหรับการรวมแผนที่และความเด่น [ จัดโค
1999 ] เพิ่มเติมสามารถเพิ่มคุณภาพของระบบเพิ่มภูมิต้านทาน
เสียง และเพิ่มความทนทานต่อการเคลื่อนไหวของตาปลอม .
นอกจากนี้ยังมีมูลค่า noting ว่าวิธีการวัดอัตราความสำเร็จ
ของ 2D / 3D ลงทะเบียนแม้ว่าอย่างต่อเนื่องประยุกต์ จากการสังเกตของอัตนัย
.
มันเป็นที่รู้จักกันว่าบุคคลสามารถใช้ภาพต่างกันค้นหา
กลยุทธ์สำหรับภาพเดียวกัน ดังนั้นการสกัด
ภาพทั่วไปพฤติกรรมการค้นหาจะดีกว่าตระหนักโดยการขยายประชากรศึกษา .
นี้ควรปรับปรุงความทนทานของเทคนิคใน
ใบหน้าของการเคลื่อนไหวของตาปลอม และยังช่วยให้สำรวจ
แล้วความแตกต่างในระดับประสบการณ์ มีผลต่อคุณภาพของแผนที่ความเด่น

การเปลี่ยนแปลงของเทคนิคหลักที่ใช้สำหรับการตรวจสอบในอนาคตอีกแบบ
Avenue ความเด่นแม้ว่าคุณลักษณะตาม
ความคมชัดหลายมาตราส่วน การ กรอง กาบอร์ ( eqn . 3 ) ได้รับ
เป็นสำคัญในระบบวิสัยทัศน์ทางชีวภาพแล้ว ยังมีวิธีอื่น
สร้างความเด่นแผนที่ซึ่งใช้ทฤษฎี [ ข้อมูล
J ตั้ง agersand 1993 ] และ [ multiscale คลื่น shokoufandeh
et al . 2542 ] .
การทดลองยืนยันว่า ในกรณีที่ไม่มีแสงพิเศษ
โมเดลที่เป็นลูกบุญธรรมความคมชัดตามแผนที่ความเด่นสามารถปรับปรุงผลกำไรเป็นมาตรการที่คล้ายคลึง cross-correlation

ในรูป 2D / 3D การลงทะเบียน การเปรียบเทียบภาพ , การใช้
เลือกคุณสมบัติตาม กาบอร์ตอบสนองกรองมีแนวโน้ม
เพิ่มเติมภูมิคุ้มกัน สภาพแสง มันต้องมีปัญหา อย่างไรก็ตาม ประสิทธิภาพของค่าใช้จ่ายค่าสหสัมพันธ์ข้าม

วัดในแบบ 2D / 3Dการลงทะเบียน จะขึ้นอยู่กับวิธีที่ถูกต้องสามารถจำลอง
แสงสว่างเงื่อนไขในการแสดงผลภาพ วิธีการหนึ่งโดย
ที่บรรจบกันของกระบวนการเพิ่มประสิทธิภาพสามารถอย่างมีนัยสำคัญ
ปรับปรุงคือการจ้างให้ดีปรับฟังก์ชั่นที่ลดทอน
สะท้อนแสงตามระยะทางจากแหล่งกำเนิดแสง

ในการปฏิบัติ อย่างไรก็ตาม การลดทอนค่าอาจมี
จะปรับได้เฉพาะกับแต่ละสถานการณ์ .
สรุป ความพยายามแรกของการลงทะเบียนภาพ 2D / 3D ใช้
สังเกตได้มาความเด่นแผนที่ได้ถูกนำเสนอ มันได้แสดงให้เห็นว่าแบบจำลองนัยของมนุษย์

ภาพค้นหาพฤติกรรมสามารถเพิ่มวิสัยทัศน์คอมพิวเตอร์