How YARN WorksYARN’s original purpo

How YARN Works
YARN’s original purpose was to split up the two major responsibilities of the JobTracker/TaskTracker into separate entities:

a global ResourceManager
a per-application ApplicationMaster
a per-node slave NodeManager
a per-application Container running on a NodeManager
The ResourceManager and the NodeManager formed the new generic system for managing applications in a distributed manner. The ResourceManager is the ultimate authority that arbitrates resources among all applications in the system. The ApplicationMaster is a framework-specific entity that negotiates resources from the ResourceManager and works with the NodeManager(s) to execute and monitor the component tasks.

The ResourceManager has a scheduler, which is responsible for allocating resources to the various applications running in the cluster, according to constraints such as queue capacities and user limits. The scheduler schedules based on the resource requirements of each application.

Each ApplicationMaster has responsibility for negotiating appropriate resource containers from the scheduler, tracking their status, and monitoring their progress. From the system perspective, the ApplicationMaster runs as a normal container.

The NodeManager is the per-machine slave, which is responsible for launching the applications’ containers, monitoring their resource usage (cpu, memory, disk, network) and reporting the same to the ResourceManager.

ผลลัพธ์ (ไทย) 1:

วิธีการทำงานของเส้นด้ายวัตถุประสงค์เดิมของเส้นด้ายได้แบ่งสองหน้าที่หลักของ JobTracker/TaskTracker ลงในเอนทิตีที่แยกต่างหาก:ResourceManager โลก ApplicationMaster ต่อใบสมัคร ทาสต่อโหน NodeManager คอนเทนเนอร์ต่อโปรแกรมประยุกต์บน NodeManager การ ResourceManager และ NodeManager เกิดขึ้นทั่วไประบบใหม่สำหรับการจัดการโปรแกรมประยุกต์ในลักษณะกระจาย ResourceManager การเป็นผู้มีอำนาจสูงสุดที่ arbitrates ทรัพยากรจากโปรแกรมประยุกต์ทั้งหมดในระบบ ApplicationMaster เป็นเอนทิตีกรอบเฉพาะที่ negotiates ทรัพยากรจากการ ResourceManager และทำงานร่วมกับ NodeManager(s) เพื่อดำเนินการ และติดตามงานประกอบResourceManager มีกำหนดการ ซึ่งเป็นผู้รับผิดชอบสำหรับการปันส่วนทรัพยากรให้กับโปรแกรมต่าง ๆ ที่รันในคลัสเตอร์ ตามข้อจำกัดของความจุของคิวและจำกัดผู้ใช้ ตารางเวลากำหนดการตามความต้องการทรัพยากรของแอพลิเคชันแต่ละแต่ละ ApplicationMaster มีความรับผิดชอบ การเก็บทรัพยากรที่เหมาะสมจากตัวจัดกำหนดการการเจรจาต่อรอง ติดตามสถานะ ตรวจสอบความคืบหน้าของพวกเขา จากมุมมองของระบบ ApplicationMaster ทำงานเป็นคอนเทนเนอร์ปกติNodeManager เป็นทาสต่อเครื่อง ซึ่งรับผิดชอบการเปิดภาชนะบรรจุของใช้งาน ตรวจสอบการใช้ทรัพยากร (cpu หน่วยความจำ ดิสก์ เครือข่าย) และรายงานเหมือน ResourceManager

ผลลัพธ์ (ไทย) 3:

วิธีการทำงานของเส้นด้ายเส้นด้าย
วัตถุประสงค์เดิมถูกแบ่ง 2 หน้าที่หลักของ jobtracker / tasktracker เป็นนิติบุคคลที่แยกต่างหาก :

( resourcemanager

applicationmaster ต่อใบสมัครต่อโหนดทาส nodemanager
ต่อภาชนะบรรจุโปรแกรมการทำงานบน nodemanager
การ resourcemanager และ nodemanager ขึ้นระบบใหม่สำหรับการจัดการโปรแกรมประยุกต์ทั่วไปในการกระจายแบบนี้ การ resourcemanager เป็นสุดยอดอำนาจที่ arbitrates ทรัพยากรในการใช้งานในระบบทั้งหมดการ applicationmaster เฉพาะนิติบุคคลที่เป็นกรอบเจรจาทรัพยากรจาก resourcemanager และทำงานกับ nodemanager ( s ) และการตรวจสอบชิ้นส่วนงาน

resourcemanager มีตารางเวลา ซึ่งรับผิดชอบในการจัดสรรทรัพยากรเพื่อการใช้งานต่างๆที่วิ่งอยู่ในกลุ่ม ตามข้อจำกัด เช่น ความจุ คิวและ จำกัด ผู้ใช้ตารางเวลาตารางเวลาขึ้นอยู่กับความต้องการทรัพยากรของแต่ละโปรแกรม

แต่ละ applicationmaster มีหน้าที่รับผิดชอบตรวจสอบภาชนะบรรจุทรัพยากรที่เหมาะสมจากตารางเวลา , การติดตามสถานะของตนเอง และติดตามความคืบหน้าของพวกเขา จากมุมมองของระบบ applicationmaster วิ่งเป็นภาชนะปกติ

nodemanager เป็นทาสต่อเครื่องซึ่งเป็นผู้รับผิดชอบในการเปิดตัวโปรแกรมประยุกต์ ' ภาชนะ , การตรวจสอบของพวกเขาการใช้ทรัพยากร ( CPU , หน่วยความจำ , ดิสก์ , เครือข่าย ) และการรายงานแบบเดียวกันกับ resourcemanager .