In many applications, the crawler c

In many applications, the crawler component has the primary responsibility for
identifying and acquiring documents for the search engine. There are a number of
different types of crawlers, but the most common is the general web crawler. A web
crawler is designed to follow the links on web pages to discover and download new
pages. Although this sounds deceptively simple, there are significant challenges in
designing a web crawler that can efficiently handle the huge volume of new pages
on the Web, while at the same time ensuring that pages that may have changed
since the last time a crawler visited a site are kept “fresh” for the search engine. A
web crawler can be restricted to a single site, such as a university, as the basis for
site search. Focused, or topical, web crawlers use classification techniques to restrict
the pages that are visited to those that are likely to be about a specific topic. This
type of crawler may be used by a vertical or topical search application, such as a
search engine that provides access to medical information on web pages.

ผลลัพธ์ (ไทย) 1:

งาน ส่วนตีนตะขาบมีความรับผิดชอบหลักสำหรับการระบุ และการได้รับเอกสารสำหรับเครื่องมือค้นหา มีจำนวนของชนิดต่าง ๆ ของโปรแกรมรวบรวมข้อมูล แต่พบมากที่สุดคือ การตระเวนเว็บทั่วไป เว็บตีนตะขาบที่ถูกออกแบบมาตามลิงค์บนเว็บเพจเพื่อค้นหา และดาวน์โหลดใหม่หน้า แม้ว่าเสียงนี้แบบง่าย มีความท้าทายที่สำคัญในการออกแบบการตระเวนเว็บที่มีประสิทธิภาพสามารถจัดการปริมาณมหาศาลของเพจใหม่บนเว็บ ในขณะที่เดียวกันที่หน้าที่อาจมีการเปลี่ยนแปลงครั้งสุดท้ายตีนตะขาบที่เข้าเยี่ยมชมไซต์จะถูกเก็บไว้ "สด" สำหรับเครื่องมือค้นหา Aสามารถจำกัดตระเวนเว็บไซต์เดียว เช่นมหาวิทยาลัย ได้เป็นพื้นฐานสำหรับการค้นหาเว็บไซต์ เน้น หรือ เฉพาะ เว็บโปรแกรมรวบรวมข้อมูลใช้เทคนิคการจัดประเภทเพื่อจำกัดเพจที่เยี่ยมชมให้กับผู้ที่มีแนวโน้มจะเกี่ยวกับหัวข้อเฉพาะ นี้ชนิดตีนตะขาบอาจถูกใช้ โดยโปรแกรมประยุกต์การค้นหาแนวตั้ง หรือเฉพาะ เช่นการเครื่องมือค้นหาที่ให้การเข้าถึงข้อมูลทางการแพทย์บนเว็บเพจ

ผลลัพธ์ (ไทย) 2:

ในการใช้งานหลายองค์ประกอบโปรแกรมรวบรวมข้อมูลมีความรับผิดชอบหลักในการ
ระบุและการได้มาซึ่งเอกสารสำหรับเครื่องมือค้นหา มีจำนวนของที่มี
แตกต่างกันของซอฟต์แวร์รวบรวมข้อมูล แต่ที่พบมากที่สุดคือซอฟต์แวร์รวบรวมข้อมูลเว็บทั่วไป เว็บ
ตีนตะขาบถูกออกแบบมาเพื่อติดตามการเชื่อมโยงบนหน้าเว็บที่จะค้นพบและดาวน์โหลดใหม่
หน้า แต่นี้เสียงเรียบง่ายมีความท้าทายที่สำคัญใน
การออกแบบซอฟต์แวร์รวบรวมข้อมูลเว็บที่มีประสิทธิภาพสามารถจัดการกับปริมาณมากหน้าใหม่
บนเว็บในขณะที่ในเวลาเดียวกันการสร้างความมั่นใจว่าหน้าเว็บที่อาจมีการเปลี่ยนแปลง
ตั้งแต่ครั้งสุดท้ายที่ซอฟต์แวร์รวบรวมข้อมูลเข้าเยี่ยมชมเว็บไซต์ จะถูกเก็บไว้ "สด" สำหรับเครื่องมือค้นหา
ซอฟต์แวร์รวบรวมข้อมูลเว็บสามารถถูก จำกัด ไปยังเว็บไซต์เดียวเช่นมหาวิทยาลัยเป็นพื้นฐานสำหรับ
การค้นหาไซต์ ที่มุ่งเน้นหรือเฉพาะซอฟต์แวร์รวบรวมข้อมูลเว็บใช้เทคนิคการจัดหมวดหมู่เพื่อ จำกัด
หน้าเว็บที่จะเข้าเยี่ยมชมให้กับผู้ที่มีแนวโน้มที่จะเกี่ยวกับหัวข้อเฉพาะ นี้
ประเภทของซอฟต์แวร์รวบรวมข้อมูลอาจถูกใช้โดยโปรแกรมค้นหาแนวตั้งหรือเฉพาะเช่น
เครื่องมือค้นหาที่ให้การเข้าถึงข้อมูลทางการแพทย์บนหน้าเว็บ

ผลลัพธ์ (ไทย) 3:

ในการใช้งานหลาย crawler ส่วนประกอบมีความรับผิดชอบหลักสำหรับการระบุและการรับเอกสารสำหรับเครื่องมือค้นหา มีจำนวนของประเภทที่แตกต่างกันของโปรแกรม แต่ที่พบบ่อยที่สุดคือบนเว็บทั่วไป เว็บข้อมูลถูกออกแบบมาเพื่อติดตามการเชื่อมโยงในหน้าเว็บเพื่อค้นหาและดาวน์โหลดใหม่หน้า แม้ว่านี้เสียงง่าย deceptively , มีความท้าทายทางออกแบบบนเว็บที่สามารถจัดการได้อย่างมีประสิทธิภาพกับปริมาณขนาดใหญ่ของหน้าเว็บใหม่บนเว็บในขณะที่ในเวลาเดียวกันให้แน่ใจว่าหน้าเว็บที่อาจมีการเปลี่ยนแปลงตั้งแต่ครั้งสุดท้ายที่เป็นไม้เลื้อยเข้าชมเว็บไซต์จะถูกเก็บไว้ " สด " สำหรับเครื่องมือค้นหา เป็นบนเว็บสามารถถูก จำกัด ไปยังไซต์เดียว เช่น มหาวิทยาลัย เป็น เกณฑ์ค้นหาเว็บไซต์ เน้น หรือเฉพาะที่ เว็บโปรแกรมใช้เทคนิคการจำแนกการ จำกัดหน้าเว็บที่เข้าเยี่ยมชมที่น่าจะเกี่ยวกับเรื่องที่เฉพาะเจาะจง นี้ประเภทของข้อมูลอาจถูกใช้โดยโปรแกรมประยุกต์แนวตั้งหรือค้นหาเฉพาะเช่นเครื่องมือค้นหาที่ให้บริการการเข้าถึงข้อมูลทางการแพทย์บนหน้าเว็บ