초록 ▼

1. 슈퍼컴퓨팅용 대용량 파일 시스템인 Lustre를 SSD 적용 시 기본 성능 분석 연구
- Lustre (병렬파일 시스템)을 HDD 와 SSD 에 대해서 성능 분석 비교 실험 수행
- Lustre 에 SSD 도입 시 High-performance Network을 반드시 필요로 함
- Lustre 의 메타데이터 서버 타겟 (MDT)의 경우, 랜덤 I/O가 많이 발생하므로 SSD를 사용할 때 성능이 향상된다.
2. PFL (Progressive File Layout) 에 SSD 도입 방안 연구
- 파일 크

1. 슈퍼컴퓨팅용 대용량 파일 시스템인 Lustre를 SSD 적용 시 기본 성능 분석 연구
- Lustre (병렬파일 시스템)을 HDD 와 SSD 에 대해서 성능 분석 비교 실험 수행
- Lustre 에 SSD 도입 시 High-performance Network을 반드시 필요로 함
- Lustre 의 메타데이터 서버 타겟 (MDT)의 경우, 랜덤 I/O가 많이 발생하므로 SSD를 사용할 때 성능이 향상된다.
2. PFL (Progressive File Layout) 에 SSD 도입 방안 연구
- 파일 크기에 따라, Lustre의 스트립 카운트를 조절하여 동적으로 저장하는 구조임
- 작은 파일의 경우, random I/O를 발생하므로 SSD에 저장하고, 큰 파일의 경우 파일 사이즈에 따라 동적으로 스트립 카운트를 조절하여 대역폭을 조절하는 방안
- SSD를 효율적으로 사용한 위 방안을 도입하여 성능 분석 실험 수행
3. SSD를 이용한 고성능 스토리지 레이어인 Burst Buffer 의 POC 성능 분석 연구
- 최신 슈퍼컴퓨팅에서 SSD를 이용한 고성능 I/O 레이어인 Burst Buffer 에 기술 동향 파악
- Burst Buffer 도입 시 Proof of Concept 형태의 일환으로 오픈소스 기반 분산파일시스템을 사용하여 성능 분석 실험 연구
- 실험결과 SSD 도입 시 고성능, 대용량 Burst Buffer 설계가 가능하며, Lustre에 연동가능

Abstract ▼

Ⅳ. Result of the study
1. Performance Analysis on Lustre usign SSDs and HDDs via experiments
- Lustre on SSD needs High-performance Network to maximize high throughput of SSDs.
- MDT(Metadata Target) in Lustre receives random I/O requests, so using SSD for MDT improves performance significa

Ⅳ. Result of the study
1. Performance Analysis on Lustre usign SSDs and HDDs via experiments
- Lustre on SSD needs High-performance Network to maximize high throughput of SSDs.
- MDT(Metadata Target) in Lustre receives random I/O requests, so using SSD for MDT improves performance significantly.
2. Research on PFL (Progressive File Layout) on SSDs/HDDs.
- Small size file should be written on SSDs whereas large size file goes to HDDs to minimize random I/O request on HDDs. For large size file, we can adjust strip count dynamically to maximize the throughput of HDDs.
- Experimental analysis using PFL on SSDs
3. Peformance analysis on Burst Buffer using proof-of-concepts experiments.
- Survey on recent technologies about how to use SSD in supercomputing environments
- Experimental Analysis of usage model for Burst Buffer

목차 Contents

• 표지 ... 1
• 제출문 ... 2
• 보고서 요약서 ... 3
• 요약문 ... 4
• Summary ... 7
• Contents ... 10
• 목차 ... 11
• 표(그림)목차 ... 12
• 제1장 연구개발과제의 개요 ... 15
• 1절. 연구 개발 과제의 배경 및 필요성 ... 15
• 2절. 연구 개발 과제의 목표 및 주요 내용 ... 16
• 제2장 국내외 기술개발 현황 ... 19
• 1절. Lustre File System ... 19
• 2절. Progressive File Layout(PFL) ... 22
• 3절. Burst Buffer ... 24
• 4절. Flash graph ... 29
• 5절. Gluster ... 31
• 제3장 연구개발수행 내용 및 결과 ... 37
• 1절. Lustre File System 구축 / SSD활용 기본 대조군 실험 ... 37
• 2절. Lustre + PFL ... 47
• 3절. Burst Buffer 관련 연구 ... 55
• 제4장 목표달성도 및 관련분야에의 기여도 ... 69
• 1절. 목표달성도 ... 69
• 2절. 관련분야에의 기여도 ... 70
• 제5장 연구개발결과의 활용계획 ... 71
• 1절. SSD를 이용한 고성능 Lustre 시스템 ... 71
• 2절. Burst Buffer ... 71
• 제6장 연구개발과정에서 수집한 해외과학기술정보 ... 72
• 1절. Lustre User Group Meeting (LUG'15) ... 72
• 2절. Burst Buffer (NERSC Meeting) ... 76
• 제7장. 참고문헌 ... 80
• 끝페이지 ... 82