4. APPLICATIONS & DamascScientists

4. APPLICATIONS & Damasc
Scientists rely on file systems to store and manipulate large volumes
of data. Since the POSIX interface provides little support for
structured data (beyond directories and files), scientists typically
rely on external data management libraries or APIs (e.g., HDF5)
that provide higher level abstractions to support access and updates
to structured data in the development of scientific applications.
Damasc can be leveraged by existing applications without rewriting
the application code, as long as data management libraries (e.g.,
NetCDF [20], NetCDF-4 [34], HDF5 [13], MPI-IO [10]) are rewritten
to interface Damasc. That is, rewrite only the external libraries
to issue declarative queries instead of reading/writing byte extents.
For instance, HDF API can be implemented on top of Damasc. In
this way, any existing application that makes use of the HDF API
can interface with Damasc without any changes to its code.
A consequence of having a common interface (i.e., Damasc) to
multiple applications is that Damasc can synthesize access information
across these applications. The aggregated access pattern
across applications can be analyzed to derive a more effective layout
and storage of data for the access pattern. For instance, the
striping strategy for a file may take into account the corresponding
query patterns in order to improve locality of access within stripes.
This type of optimization becomes very difficult when the file system
only observes low-level information such as reads and writes
to byte extents.

ผลลัพธ์ (ไทย) 2:

4. การประยุกต์ใช้งานและ Damasc
นักวิทยาศาสตร์ต้องพึ่งพาระบบไฟล์ในการจัดเก็บและจัดการปริมาณมากของข้อมูล
ตั้งแต่อินเตอร์เฟซ POSIX
ให้การสนับสนุนน้อยสำหรับข้อมูลที่มีโครงสร้าง(เกินไดเรกทอรีและไฟล์)
นักวิทยาศาสตร์มักจะขึ้นอยู่กับข้อมูลภายนอกห้องสมุดบริหารหรือAPIs (เช่น HDF5)
ที่ให้แนวคิดระดับที่สูงขึ้นเพื่อสนับสนุนการเข้าถึงและการปรับปรุงข้อมูลที่มีโครงสร้างในการพัฒนาทางวิทยาศาสตร์
การใช้งาน.
Damasc สามารถ leveraged
โดยโปรแกรมที่มีอยู่โดยไม่ต้องเขียนรหัสโปรแกรมตราบเท่าที่ข้อมูลห้องสมุดการจัดการ(เช่น
NetCDF [20], NetCDF-4 [34], HDF5 [13], MPI-IO [10]) จะเขียนใหม่
ติดต่อ Damasc นั่นคือเขียนเพียงห้องสมุดภายนอกในการออกคำสั่งประกาศแทนการอ่าน / เขียนขอบเขตไบต์. ยกตัวอย่างเช่น HDF API สามารถดำเนินการด้านบนของ Damasc ในวิธีนี้โปรแกรมใด ๆ ที่มีอยู่ซึ่งทำให้การใช้ HDF API สามารถติดต่อกับ Damasc โดยไม่มีการเปลี่ยนแปลงใด ๆ ที่รหัส. เป็นผลมาจากการมีติดต่อกัน (เช่น Damasc) เพื่อการใช้งานหลายที่Damasc สามารถสังเคราะห์เข้าถึงข้อมูลในการใช้งานเหล่านี้. รูปแบบการเข้าถึงรวมในการใช้งานสามารถวิเคราะห์เพื่อให้ได้รูปแบบที่มีประสิทธิภาพมากขึ้นและการจัดเก็บข้อมูลสำหรับรูปแบบการเข้าถึง ยกตัวอย่างเช่นกลยุทธ์แถบไฟล์อาจคำนึงถึงความสอดคล้องกันรูปแบบแบบสอบถามเพื่อปรับปรุงสถานที่ของการเข้าถึงที่อยู่ในลาย. ประเภทของการเพิ่มประสิทธิภาพนี้จะกลายเป็นเรื่องยากมากเมื่อระบบไฟล์เพียงสังเกตข้อมูลในระดับต่ำเช่นอ่านและเขียนเพื่อไบต์ขอบเขต

ผลลัพธ์ (ไทย) 3:

4 . โปรแกรม& damasc
นักวิทยาศาสตร์พึ่งพาระบบการจัดเก็บไฟล์และจัดการปริมาณมาก
ข้อมูล ตั้งแต่ POSIX อินเตอร์เฟซให้การสนับสนุนน้อยสำหรับ
ข้อมูลโครงสร้าง ( นอกเหนือจากไดเรกทอรีและไฟล์ ) , นักวิทยาศาสตร์มักจะ
พึ่งห้องสมุดการจัดการข้อมูลภายนอกหรือ API ( เช่น hdf5 )
ให้สูงกว่าระดับนามธรรมเพื่อสนับสนุนการเข้าถึงและการปรับปรุง
กับข้อมูลที่มีโครงสร้างในการพัฒนาโปรแกรมประยุกต์ทางวิทยาศาสตร์
damasc สามารถ leveraged โปรแกรมที่มีอยู่โดยไม่ต้องเขียนใหม่
รหัสโปรแกรม ตราบใดที่ห้องสมุดการจัดการข้อมูล ( เช่น
netcdf [ 20 ] , netcdf-4 [ 34 ] , hdf5 [ 13 ] mpi-io [ 10 ] ) จะเขียนใหม่
ติดต่อ damasc . ที่เขียนเฉพาะห้องสมุดภายนอก
ปัญหาการประกาศแบบสอบถามแทนการอ่าน / การเขียนขอบเขตไบต์ .
ตัวอย่างเช่น HDF API ที่สามารถดำเนินการบน damasc . ใน
วิธีนี้ที่มีอยู่ใด ๆโปรแกรมที่จะทำให้ใช้ของ HDF API
สามารถติดต่อกับ damasc โดยไม่มีการเปลี่ยนแปลงใด ๆ รหัส .
ผลมีอินเตอร์เฟซทั่วไป ( เช่น damasc )

หลายโปรแกรมที่ damasc สามารถสังเคราะห์
การเข้าถึงข้อมูลระหว่างโปรแกรมเหล่านี้ โดยรวมการเข้าถึงรูปแบบ
ข้ามโปรแกรมสามารถวิเคราะห์เพื่อให้ได้ประสิทธิภาพเค้าโครง
และการเก็บข้อมูลสำหรับการเข้าถึงแบบ ตัวอย่างเช่น
แถบกลยุทธ์สำหรับไฟล์อาจจะคำนึงถึงสอดคล้อง
แบบสอบถามรูปแบบเพื่อปรับปรุงการเข้าถึงภายในท้องถิ่นของแถบ
เพิ่มประสิทธิภาพชนิดนี้กลายเป็นยากมาก เมื่อไฟล์ระบบ
แค่สังเกต เช่น ข้อมูลระดับไบต์อ่านและเขียน
เพื่อ extents .