Finally, the necessity of crawling

Finally,
the necessity of crawling 100 million pages a day means that building a crawler
is an exercise in distributed computing,
requiring many computers that must work together and schedule their actions so as to get to all the pages without overwhelming any one site with too
many requests at once.

ผลลัพธ์ (ไทย) 1:

ในที่สุด ความจำเป็นของการคลาน 100 ล้านหน้าวันหมายความ ว่า อาคารที่ตีนตะขาบเป็นการออกกำลังกายระบบคอมพิวเตอร์แบบกระจาย ต้องใช้คอมพิวเตอร์จำนวนมากที่ต้องทำงานร่วมกัน และกำหนดเวลาการดำเนินการของพวกเขาเพื่อไปยังเพจทั้งหมดโดยไม่ครอบงำใดเว็บไซต์หนึ่งมีมากเกินไปร้องขอหลายครั้ง

ผลลัพธ์ (ไทย) 2:

ในที่สุด
ความจำเป็นของการรวบรวมข้อมูล 100 ล้านหน้าต่อวันซึ่งหมายความว่าการสร้างซอฟต์แวร์รวบรวมข้อมูล
คือการออกกำลังกายในการคำนวณแบบกระจาย
กำหนดให้เครื่องคอมพิวเตอร์จำนวนมากที่จะต้องทำงานร่วมกันและกำหนดเวลาการกระทำของพวกเขาเพื่อให้ได้รับไปยังหน้าเว็บทั้งหมดโดยไม่ครอบงำใดเว็บไซต์หนึ่งที่มีมากเกินไป
หลาย ๆ คำขอในครั้งเดียว