초록

용어보기논문에서 용어와 풀이말을 자동 추출한 결과로, 시범 서비스 중입니다. AI-Helper

병렬 처리를 요구하는 계산 과학 분야의 문제들 중에는 대용량 데이터 처리를 필요로 하는 경우가 많다. 그러나 기존의 파일 시스템을 그대로 병렬처리 환경에 적용하기에는 많은 문제가 따른다. 이를 위해서 병렬처리를 지원하는 파일 시스템에 대한 연구와 개발이 진행되어 오고 있다. 이와 같은 연구 중 하나인 집합 I/O(Collective I/O)를 본 논문에서 다루고자 한다. 이 집합 I/O는 여러 프로세스의 파일 I/O 요청을 효과적으로 처리하는 방법으로 MPl2의 MPI-10에도 포함되어 있다. 본 논문에서는 어플리케이션 프로그램 측면에서 MPI-10의 집합 I/O를 효과적으로 사용하기 위한 방안을 제시하며, 보편적으로 사용되는 NFS를 이용한 클러스터 시스템에서의 실험 결과를 분석한다.

병렬 처리를 요구하는 계산 과학 분야의 문제들 중에는 대용량 데이터 처리를 필요로 하는 경우가 많다. 그러나 기존의 파일 시스템을 그대로 병렬처리 환경에 적용하기에는 많은 문제가 따른다. 이를 위해서 병렬처리를 지원하는 파일 시스템에 대한 연구와 개발이 진행되어 오고 있다. 이와 같은 연구 중 하나인 집합 I/O(Collective I/O)를 본 논문에서 다루고자 한다. 이 집합 I/O는 여러 프로세스의 파일 I/O 요청을 효과적으로 처리하는 방법으로 MPl2의 MPI-10에도 포함되어 있다. 본 논문에서는 어플리케이션 프로그램 측면에서 MPI-10의 집합 I/O를 효과적으로 사용하기 위한 방안을 제시하며, 보편적으로 사용되는 NFS를 이용한 클러스터 시스템에서의 실험 결과를 분석한다.

AI 본문요약

엑셀 다운로드 AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

• 연구 주제
• 연구 방법
• 연구 결과

문제 정의

• 이러한 어플리케이션들을 처리하기 위한 노력 중 하 나로 M미2 라이브러리에 포함된 MPI니。플 생각해 볼 수 있다[1]. 본 논문에서는 Ml기니 O 기능 중, 파일 시스템의 성능에 중요한 영향을 미치는 집합 l/0(C에ective I/O)에 대하여 다루고자 한다.
• 이와 같은 통신 부하는 프로세스 수에 증가에 따라 급격하게 증가할 것이며, 또한 특수한 IOP 가지고 있는 병렬 파일 시스템이 아닌 일반적인 파일 시스템으로 구성된 시스템의 경우에는, 병렬 파일 시스템의 장점을 살리지 못하므 로 통신 부하로 인한 성능 저하가 급격하게 나타 날 것이라 는 가정 아래, 본 논문에서는 집합 I/O를 수행하는 프로세스의 수를 줄이고자 하는 시도를 하였다.

제안 방법

• 계산 노드 수를 증가시키면서 테스트를 수행하였는데, 각 노드들은 4096 바이트룔 생성하고 동일한 파일 크기를 유지하기 위하여 반복 홧수를 조정하였다. 테스트 결과는 [그림 3] 과 같다.
• 이와 같은 그룹화 과정은 기존의 기본적인 MPI 원시 함 수들을 이용하여 처리가 가능하다. 그룹화 계수 및 MPI 커 유니티 관리 함수를 이용하여 프로세스 그룹화를 수행하였고, 그룹 내에서의 데이터 취합 및 배분은 MPI 집합 통신 (C이le아ive Communication)을 사용하여 처리하였다.
• 본 논문에서 제안하는 프로세서 그룹화 방법은 응용 프로그램에서 집합 I/O를 수행할 시에, 프로세스들을 몇 개의 그룹으로 묶은 뒤 이들 그룹당 1개의 프로세스만 집합 I/O를 수행토록 하는 서브 루틴의 일종이다.
• 본 논문에서 제안한 프로세스 그룹화는 기존의 M이 함수 들을 이용하여 MPITO를 보다 효과적으로 사용할 수 있도록 제시한 프로그래밍 모델이다. 클러스터 시스템에서의 성능 측정 결과, 기존의 MPI니。함수만을 사용한 결과보다 개선된 성능을 보여주고 있다.

성능/효과

• 그룹화 없이 MPI 집합I/O를 사용할 경우 성능 저하가 급격히 나타났으나, Read와 Write모두에서 그룹화롤 거쳐 집합I/O룔 수행할 경우, 성능 저하를 현저히 줄일 수 있슴을 확인할 수 있었다.
• 이 전의 연구결과와 같이 성능 평가에 사용된 파일시스템이 병렬 파일을 지원하는 특수 파일 시스템이 아닌 NFS0I 므로 프로세서 수가 증가함에 따라 성능 저하가 나타남을 확인 활 수 있었다. 그러나 그룹화룔 사용한 경우에는, 집합 I/O가 갖는 부하를 줄여줄 수 있음을 살펴볼 수 있었다.

본문요약 정보가 도움이 되었나요? 예 아니오 제출

이 논문을 인용한 문헌

더보기