During a research project’s lifecyc

During a research project’s lifecycle, functions such as data analysis, curation, archiving and access may be carried out simultaneously. These functions involve diverse technologies and require computational power relative to the size and complexity of the data collection. For large, complex and evolving data collections like ICA’s, data management tasks such as extracting metadata or calculating checksums quickly become effort- and resource-intensive. Thus, repeating these tasks at the desired frequency and speed becomes challenging in a non-scalable desktop computing environment. The quest for bigger computing and storage resources leads to HPC platforms and solutions. However, using these platforms, which are mostly Linux- based, might be initially challenging for data curators without prior experience, as was the case with the curators at ICA. Through their collaboration with TACC, the ICA staff received HPC user environment training and consultancy in the development of a practical workflow for ongoing curation. They were first trained to install the required software, run scripts for data transfers, and run the scripts for metadata extraction on an HPC platform. During the workflow development phase, the curators were involved in testing when needed. The collaboration prepared them to work independently in an HPC environment, and the experiences gained in the process may be valuable for other projects with similar data management needs.

ผลลัพธ์ (ไทย) 1:

ในช่วงระยะเวลาของโครงการวิจัย ฟังก์ชันเช่นการวิเคราะห์ข้อมูล เทคโนโลยี การเก็บ และการเข้าถึงอาจจะดำเนินการพร้อมกัน ฟังก์ชันเหล่านี้เกี่ยวข้องกับเทคโนโลยีที่หลากหลาย และต้องใช้พลังงานคำนวณเมื่อเทียบกับขนาดและความซับซ้อนของการรวบรวมข้อมูล สำหรับคอลเลกชันขนาดใหญ่ ซับซ้อน และพัฒนาข้อมูลเช่นของ ICA งานการจัดการข้อมูลเช่นข้อมูลเมตาการแยก หรือการคำนวณ checksums อย่างรวดเร็วกลายเป็น ความพยายาม และทรัพยากรสูง ดังนั้น งานเหล่านี้ที่ต้องการความถี่และความเร็วในการทำซ้ำจะท้าทายในสภาพแวดล้อมระบบคอมพิวเตอร์เดสก์ท็อปไม่สามารถปรับขนาด การแสวงหาทรัพยากรคอมพิวเตอร์และจัดเก็บข้อมูลขนาดใหญ่ที่นำไปสู่แพลตฟอร์ม HPC และโซลูชั่น อย่างไรก็ตาม โดยใช้แพลตฟอร์มเหล่านี้ ซึ่งส่วนใหญ่เป็น Linux-คะแนน อาจเป็นครั้งแรกเรื่องท้าทายสำหรับข้อมูลผู้แนะนำ โดยประสบการณ์ก่อน เป็นกรณีที่ มีผู้แนะนำที่ ICA ผ่านความร่วมมือกับ TACC พนักงาน ICA รับ HPC ผู้ใช้สภาพแวดล้อมการฝึกอบรมและให้คำปรึกษาในการพัฒนาเวิร์กโฟลว์ที่ปฏิบัติสำหรับเทคโนโลยีอย่างต่อเนื่อง พวกเขามีการฝึกอบรมการติดตั้งซอฟต์แวร์จำเป็น ก่อนการเรียกใช้สคริปต์สำหรับถ่ายโอนข้อมูล และเรียกใช้สคริปต์สำหรับดึงข้อมูลเมตาบนแพลตฟอร์ม HPC ในระหว่างขั้นตอนการพัฒนาเวิร์กโฟลว์ ผู้แนะนำการมีส่วนร่วมในการทดสอบเมื่อจำเป็น ความร่วมมือเตรียมพวกเขาให้ทำงานอย่างอิสระในสภาพแวดล้อม HPC และประสบการณ์ที่ได้รับในกระบวนการอาจมีคุณค่าสำหรับโครงการอื่น ๆ ที่มีข้อมูลอื่นที่ต้องการการจัดการ

ผลลัพธ์ (ไทย) 2:

ในช่วงวงจรชีวิตของโครงการวิจัยของฟังก์ชั่นเช่นการวิเคราะห์ข้อมูลการจัดการรูปภาพ, การเก็บข้อมูลและการเข้าถึงอาจจะดำเนินการไปพร้อม ๆ กัน ฟังก์ชั่นเหล่านี้เกี่ยวข้องกับเทคโนโลยีที่มีความหลากหลายและต้องใช้พลังงานญาติคำนวณขนาดและความซับซ้อนของการเก็บรวบรวมข้อมูล สำหรับขนาดใหญ่ที่มีความซับซ้อนและการพัฒนาคอลเลกชันข้อมูลเช่น ICA ของงานด้านการจัดการข้อมูลเช่นการแยกข้อมูลเมตาหรือการคำนวณ checksums อย่างรวดเร็วกลายเป็น effort- และทรัพยากรมาก ดังนั้นการทำซ้ำงานเหล่านี้ที่ความถี่ที่ต้องการความเร็วและกลายเป็นความท้าทายในสภาพแวดล้อมเดสก์ทอปคอมพิวเตอร์ที่ไม่สามารถปรับขนาดได้ เควสสำหรับการประมวลผลและการจัดเก็บที่ใหญ่กว่าทรัพยากรนำไปสู่​​แพลตฟอร์ม HPC และการแก้ปัญหา อย่างไรก็ตามการใช้แพลตฟอร์มเหล่านี้ซึ่งจะขึ้นอยู่ส่วนใหญ่ Linux- อาจจะครั้งแรกที่ท้าทายสำหรับภัณฑารักษ์ข้อมูลที่ไม่มีประสบการณ์มาก่อนหน้านี้เช่นกรณีที่เกิดกับภัณฑารักษ์ที่ ICA โดยความร่วมมือของพวกเขาด้วย TACC พนักงาน ICA ได้รับการฝึกอบรม HPC สภาพแวดล้อมของผู้และให้คำปรึกษาในการพัฒนาขั้นตอนการทำงานในทางปฏิบัติสำหรับการดูแลจัดการอย่างต่อเนื่อง พวกเขาได้รับการฝึกฝนเป็นครั้งแรกในการติดตั้งซอฟแวร์ที่ต้องการเรียกใช้สคริปต์สำหรับการถ่ายโอนข้อมูลและการเรียกใช้สคริปต์ในการสกัดเมตาดาต้าบนแพลตฟอร์ม HPC ในระหว่างขั้นตอนการพัฒนาขั้นตอนการทำงานภัณฑารักษ์มีส่วนร่วมในการทดสอบเมื่อมีความจำเป็น การทำงานร่วมกันเตรียมไว้ให้พวกเขาทำงานได้อย่างอิสระในสภาพแวดล้อม HPC และประสบการณ์ที่ได้รับในกระบวนการอาจจะมีคุณค่าสำหรับโครงการอื่น ๆ ที่มีความต้องการการจัดการข้อมูลที่คล้ายกัน

ผลลัพธ์ (ไทย) 3:

ในวงจรชีวิตของโครงการวิจัยของ ฟังก์ชัน เช่น การวิเคราะห์ข้อมูล การเข้าถึงอาจ curation , เก็บข้อมูลและนำออกมาพร้อมกัน ฟังก์ชันเหล่านี้เกี่ยวข้องกับเทคโนโลยีที่หลากหลาย และต้องใช้พลังการคำนวณเทียบกับขนาดและความซับซ้อนของการเก็บข้อมูล ขนาดใหญ่ที่ซับซ้อนและการพัฒนาข้อมูลคอลเลกชัน เช่น ICA , ข้อมูลการบริหารงาน เช่น การสกัดข้อมูลหรือคํานวณ checksums อย่างรวดเร็วกลายเป็นความพยายามและทรัพยากรที่เข้มข้น ดังนั้น ย้ำงานเหล่านี้ที่ความถี่ที่ต้องการ และความเร็วจะท้าทายในระบบคอมพิวเตอร์เดสก์ท็องค์กรสิ่งแวดล้อม ค้นหา คอมพิวเตอร์ขนาดใหญ่และทรัพยากรที่เก็บไปสู่แพลตฟอร์มอื่นๆ และโซลูชั่น อย่างไรก็ตาม การใช้แพลตฟอร์มเหล่านี้ ซึ่งส่วนใหญ่จะเป็น Linux - based , อาจจะเริ่มต้นที่ภัณฑารักษ์ข้อมูลโดยไม่ต้องมีประสบการณ์ , เป็นกรณีที่มีภัณฑารักษ์ใน Ica . โดยความร่วมมือของพวกเขากับ tacc เจ้าหน้าที่ไอซี HPC ผู้ใช้ได้รับสภาพแวดล้อมการฝึกอบรมและให้คำปรึกษาในการพัฒนาเวิร์กโฟลว์ปฏิบัติสำหรับ curation อย่างต่อเนื่อง พวกเขาถูกฝึกให้ติดตั้งซอฟต์แวร์ที่จำเป็น , รันสคริปต์สำหรับการถ่ายโอนข้อมูลและเรียกใช้สคริปต์การสกัดข้อมูลบน PPC แพลตฟอร์ม ในระหว่างขั้นตอนการพัฒนาเวิร์กโฟลว์ , ภัณฑารักษ์เกี่ยวข้องในการทดสอบเมื่อจำเป็น ความร่วมมือ พร้อมที่จะทำงานอย่างอิสระในสภาพแวดล้อม HPC และประสบการณ์ที่ได้รับในกระบวนการอาจจะมีคุณค่าสำหรับโครงการอื่น ๆ กับความต้องการของการจัดการข้อมูลที่คล้ายกัน