[논문]효율적인 자원 관리를 위한 핫데이터 분류기 및 관리 정책 설계

이현섭

doi:10.20465/kiots.2023.9.5.011

효율적인 자원 관리를 위한 핫데이터 분류기 및 관리 정책 설계
A Design of Hot Data Classifier and Management Scheme for An Efficient Resource Management 원문보기

사물인터넷융복합논문지 = Journal of internet of things and convergence, v.9 no.5, 2023년, pp.11 - 16

이현섭 (백석대학교 컴퓨터공학부)

초록
AI-Helper

핫데이터는 저장시스템의 성능과 수명에 영향을 주는 사용 빈도가 높은 데이터이다. 따라서 식별된 핫데이터를 분류하여 관리하는 것은 저장장치의 성능과 수명을 위해 중요한 일이다. 특히 특정 블록에 집중적인 쓰기 동작을 반복하면 열화 현상이 급격하게 진행되는 특징을 가지고 있는 낸드 플래시 메모리는 이러한 핫데이터를 구분하여 관리하는 것이 성능과 수명을 향상하기 위해 필요하다. 본 논문에서는 엔터프라이즈 서버에서 추출한 트레이스를 벤치마킹하여 플래시 메모리 기반 저장장치에서 자원을 효율적으로 관리하는데 필요한 핫데이터 분류기 및 관리 정책을 설계한다. 또한. 멀티 해시를 이용하여 핫데이터의 빈도를 측정하고, 식별된 핫데이터를 구분하여 열화에 강한 미디어에 관리하는 기법을 통해 저장시스템의 성능과 수명을 향상시키는 방법을 제안한다. 마지막으로 실험을 통해 증가한 성능과 수명을 측정하여 제안하는 방법의 효과를 증명한다.

Abstract ▼ AI-Helper

Hot data is frequently used data that affects the performance and lifespan of a storage system. Therefore, classifying and managing the identified hot data is important for the performance and lifetime of storage devices, especially for NAND flash memory, which is characterized by rapid degradation after repeated intensive write operations to specific blocks. In this paper, we design a hot data classifier and management scheme for an efficient resource management in flash memory-based storage devices by benchmarking traces extracted from enterprise servers. Also, we propose a method to measure the frequency of hot data using multiple hashes, and to improve the performance and lifetime of the storage system by classifying the identified hot data and managing it on degradation-resistant media. Finally, we demonstrate the effectiveness of the proposed method by measuring the increased performance and lifetime through experiments.

주제어

표/그림 (11)

그림 [Fig. 1] NAND Flash Memory
그림 [Fig. 2] Role of FTL
그림 [Fig. 3] Count of Access
그림 [Fig. 4] Key Idea
표 Hot Data Analysis
그림 [Fig. 5] Hash Based Hot Data Identifier
그림 [Fig. 6] SLC Translation Method
그림 [Fig. 7] Sector Mapping with Hot Data
그림 [Fig. 8] The Number of Read and Write
그림 [Fig. 9] The Number of Erase
그림 [Fig. 10] Estimated Time

참고문헌 (15)

Q.Luo, X.Fang, Y.Sun, J.Ai and C.Yang, "Self-learning？hot data prediction: Where echo state network meets？NAND flash memories," IEEE Transactions on Circuits？and Systems I: Regular Papers, Vol.67, No.3,？pp.939-950, 2020.

상세보기
F.Yu, and H.Yan, "An Efficient Hot-Cold Data？Separation Garbage Collection Algorithm Based on？Logical Interval in NAND Flash-based Consumer？Electronics," IEEE Transactions on Consumer？Electronics, Vol.69, No.3, pp.431-440, 2023.
H.S.Lee, "A method for optimizing lifetime prediction？of a storage device using the frequency of occurrence？of defects in NAND flash memory," Journal of Internet？of Things and Convergence, Vol.7, No.4, pp.9-14,？2021.
H.S.Lee, "High Efficiency Life Prediction and Exception？Processing Method of NAND Flash Memory-based？Storage using Gradient Descent Method," Journal of？Convergence for Information Technology, Vol.11,？No.11, pp.44-50, 2021
H.S.Lee, "A Safety IO Throttling Method Inducting？Differential End of Life to Improving the Reliability of？Big Data Maintenance in the SSD based RAID,"？Journal of Digital Convergence, Vol.20, No.5,？pp.593-598, 2022.
H.S.Lee, "Performance analysis and prediction through？various over-provision on NAND flash memory based？storage," Journal of Digital Convergence, Vol.20, No.3,？pp.343-348, 2022.
S.Yoo, and D.Shin, "Reinforcement Learning-Based？SLC Cache Technique for Enhancing SSD Write？Performance," In 12th USENIX Workshop on Hot？Topics in Storage and File Systems, 2020.
S.Y.Lim and H.J.Chang, "Airflow management analysis？to suppress data center hot spots," Building and？Environment, Vol.197, pp.107843, 2021.

상세보기
X.Ye and S.Xu, "Study on surface defect classification？of hot-rolled strip based on PSO-SVM," In Proceedings？of the Eighth Asia International Symposium on？Mechatronics, Vol.885, pp.1846-1855, 2021.
S.Rajendran, O.I.Khalaf, Y.Alotaibi and S.Alghamdi,？"MapReduce-based big data classification model？using feature subset selection and hyperparameter？tuned deep belief network," Scientific Reports, Vol.11,？No.1, pp.24138, 2021.
S.Wu, W.Zhang, B.Mao and H.Jiang, "HotR: Alleviating？Read/Write Interference with Hot Read Data？Replication for Flash Storage," 2019 Design,？Automation & Test in Europe Conference &？Exhibition (DATE), pp.1367-1372, 2019.
H.S.Lee, "A Prediction-Based Data Read Ahead Policy？using Decision Tree for improving the performance of？NAND flash memory based storage devices," Journal？of Internet of Things and Convergence, Vol.8, No.4,？pp.9-15, 2022.
H.S.Lee, "A Memory Mapping Technique to Reduce？Data Retrieval Cost in the Storage Consisting of Multi？Memories," Journal of Internet of Things and？Convergence, Vol.9, No.1, pp.19-24, 2023
H.S.Lee, "A Study on the Performance Measurement？and Analysis on the Virtual Memory based FTL Policy？through the Changing Map Data Resource," Journal of？Internet of Things and Convergence, Vol.9, No.1,？pp.71-76, 2023
http://iotta.snia.org/traces/block-io/388

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증