소프트웨어의 중요성이 높아지면서 소프트웨어 품질평가에 대한 관심이 높아지고 있다. 본 연구에서는 소프트웨어 품질 평가를 위한 국제 표준 문서를 비교 분석하고 테스트 데이터 분석을 통한 평가 방안을 제시한다. 국제표준 ISO/IEC 9126-2의 평가 모델과 ISO/IEC 25023의 평가 모델에 대한 차이점을 비교했다. ISO/IEC 25023의 평가모델인 8가지 품질 특성, 즉 기능성, 신뢰성, 사용성, 유지보수성, 이식성, 효율성, 상호운영성, 보안성적인 측면에서 평가 메트릭을 제시했다. 실제 테스트를 통해 얻어진 331개 자료를 분석해서 테스트 데이터의 발견된 오류 특징을 파악했다. 또한 결함 자료를 분석하고 차이점을 파악했다. 테스트데이터가 남녀에 따라서 시험 일수나 발견하는 품질 특성별 오류의 수에는 차이가 있음을 증명하고 시험일수를 기능성, 사용성, 성별을 가지고 예측했으며, 제품의 종류에 따라서도 오류수에 차이가 있음을 증명했다.
소프트웨어의 중요성이 높아지면서 소프트웨어 품질평가에 대한 관심이 높아지고 있다. 본 연구에서는 소프트웨어 품질 평가를 위한 국제 표준 문서를 비교 분석하고 테스트 데이터 분석을 통한 평가 방안을 제시한다. 국제표준 ISO/IEC 9126-2의 평가 모델과 ISO/IEC 25023의 평가 모델에 대한 차이점을 비교했다. ISO/IEC 25023의 평가모델인 8가지 품질 특성, 즉 기능성, 신뢰성, 사용성, 유지보수성, 이식성, 효율성, 상호운영성, 보안성적인 측면에서 평가 메트릭을 제시했다. 실제 테스트를 통해 얻어진 331개 자료를 분석해서 테스트 데이터의 발견된 오류 특징을 파악했다. 또한 결함 자료를 분석하고 차이점을 파악했다. 테스트데이터가 남녀에 따라서 시험 일수나 발견하는 품질 특성별 오류의 수에는 차이가 있음을 증명하고 시험일수를 기능성, 사용성, 성별을 가지고 예측했으며, 제품의 종류에 따라서도 오류수에 차이가 있음을 증명했다.
As software is very important, modern men are interesting software quality testing. In this paper, we analyze the Internation standard and Test data, so, we propose the testing method by analysing testing data. We compare ISO/IEC 9126-2 testing model with ISO/IEC 25023 testing model. On the basis of...
As software is very important, modern men are interesting software quality testing. In this paper, we analyze the Internation standard and Test data, so, we propose the testing method by analysing testing data. We compare ISO/IEC 9126-2 testing model with ISO/IEC 25023 testing model. On the basis of ISO/IEC 25023, we classify the test data and we analyze the difference of International Standard to functionality, reliability, usability, efficiency, maintainability, portability, compatability, and security. By reality 331 testing data, we classify test data, and analyze difference according to sex. We find regression model by functionality, usability and testing date and we prove difference of testing date and the number of error by tester. Also, we prove difference of the number of error in software type.
As software is very important, modern men are interesting software quality testing. In this paper, we analyze the Internation standard and Test data, so, we propose the testing method by analysing testing data. We compare ISO/IEC 9126-2 testing model with ISO/IEC 25023 testing model. On the basis of ISO/IEC 25023, we classify the test data and we analyze the difference of International Standard to functionality, reliability, usability, efficiency, maintainability, portability, compatability, and security. By reality 331 testing data, we classify test data, and analyze difference according to sex. We find regression model by functionality, usability and testing date and we prove difference of testing date and the number of error by tester. Also, we prove difference of the number of error in software type.
* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.
문제 정의
본 연구에서는 소프트웨어 품질 평가란 차원에서 소프트웨어 국제표준의 변화에 대해서 살펴보고 테스트 데이터를 통계적 기법의 기술을 활용해서 비교 분석하였다. 2장에서는 융합 소프트웨어 품질과 관련된 국제표준의 변화와 메트릭의 변화에 대해서 소개하고, 품질 융합 평가 메트릭을 기반으로 ISO/IEC 9126-2의 평가 메트릭과 비교한다[8,9,10].
본 연구에서는 융합 소프트웨어 시험 자료를 이용해서 발견되어지는 오류수에 대한 분석을 실시하여 보았다. 제품의 종류에 따라서 발견되어지는 오류수에는 다소 차이가 있는 것으로 분석되었다.
본 연구에서는 현재 사용하고 있는 국제표준문서 ISO/IEC 9126-2와 2016년 국제 표준 문서의 투표를 완료해서 부합화 과정이 필요한 ISO/IEC 25023의 표준 문서를 비교하고 평가방안을 제시하려한다[3-7].
가설 설정
H0 : 시험평가자의 성별은 기능성(사용성, 일반적요구 사항) 오류발견의 평균값에 영향을 주지 않는다.
H1 : 시험평가자의 성별은 기능성(사용성, 일반적요구 사항) 오류발견의 평균값에 영향을 준다.
제안 방법
즉 예상 시험일수 산정을 위해서는 제품의 기능이 어느 정도인지를 기준으로 삼는 것이 가장 좋음을 알 수 있다. 다음은 남자 시험원과 여자 시험원이 기능성과 사용성과 일반적 요구사항이란 측면에서 어떤 차이가 있는지 검정하여 보았다. 성별에 따라서 오류수의 값에는 어떤 영향을 받는지 조사해 본 결과이다.
3장에서는 소프트웨어 시험 기관에서 331개의 융합 소프트웨어 제품에 대한 시험평가를 통해서 얻어진 고장관련 자료를 이용하여 분석하였다. 본 연구를 위해서 소프트웨어 시험기간에서 시험 평가한 자료를 품질 특성별로 오류수를 중점으로 하여 비교 검토하였다. 먼저 331개의 융합 소프트웨어를 제품별로 분류하여 품질 특성별로 정량적 수치를 비교한 표는 아래와 같다.
대상 데이터
3장에서는 소프트웨어 시험 기관에서 331개의 융합 소프트웨어 제품에 대한 시험평가를 통해서 얻어진 고장관련 자료를 이용하여 분석하였다. 본 연구를 위해서 소프트웨어 시험기간에서 시험 평가한 자료를 품질 특성별로 오류수를 중점으로 하여 비교 검토하였다.
데이터처리
3장에서는 실제 현장에서 시험을 통해서 얻어진 331개 제품에 대한 품질 평가 자료를 시험일수와 각 품질 특성별 오류수의 차이점을 비교 검토하고 성별에 따라서 나타나는 품질 특성별 오류수에 대한 분석을 실시한다. 국제표준에 입각하여 품질 특성별 제품의 시험 평가 과정에서 발견된 오류 수를 기반으로 분석하고, 제품별 융합 소프트웨어를 시험하기 위해서 소요되는 시간에 대한 평균 차이 분석을 실시하였다[11,12]. 4장에서는 본 연구에서 얻어진 결과에 대한 정리와 앞으로의 연구방향과 연구과제에 대해서 제시 한다[13-15].
성별에 따라서 남성보다는 여성이 기능성과 사용성의 오류를 많이 발견하는 것으로 조사되었다. 다음은 성별을 가변수로 하여 남성과 여성이 시험일수에 어느 정도 영향을 미치는지 파악하기 위해 회귀분석을 실시했다.
시험기관의 자료를 이용해서 성별에 따라서 기능성(사용성, 일반적요구사항)의 오류를 발견하는 수에는 어떤 차이가 있는지 확인하기 위하여 평균차이 검정을 유의수준 5%에서 실시하였다. 데이터분석결과 기능성 오류수와 사용성 오류수는 성별에 따라서 차이가 있는 것으로 나타났으며, 특히 여성이 남성에 비하여 오류 발견 수가 많은 것으로 조사되었다.
다음은 소프트웨어 시험을 위한 비용에 가장 영향을 크게 줄 수 있는 시험일수에 대한 영향을 변인별로 파악하기 위해서 회귀분석 한 자료이다. 시험일수에 가장 영향을 많이 줄 요인을 발견하기 위해서 제품 품질 특성을 독립변수로 하여 회귀분석을 실시하였다.
성능/효과
331개의 융합 소프트웨어를 통해서 시험 평가로 얻어진 자료를 분석한 결과 결함은 대체적으로 기능성과 사용성에서 많이 발생하는 것으로 조사되었으며, 제품의 종류에 따라서 많은 편차가 나타난다는 것을 알 수 있었다. 소요되는 시험 일자의 경우 최소 4일에서 최대 60일까지 소요되고 있었으며, 기능성 관련 오류의 경우 제품에 따라 다소 차이는 있겠지만 최저 0개에서 최대 81개인 것으로 조사되었다.
TTA에서 수행한 소프트웨어 시험 평가를 제품의 숫자적인 측면에서 분석하여 보면 2001년부터 2012년 까지 소프트웨어 시험건수가 상당히 증가 추세에 있다는 것을 알 수 있고, 최근 2년 사이에 더 많은 제품에 대한 평가가 이루어지고 있다는 것을 알 수 있다. 소프트웨어 품질에 대한 신뢰성 향상이란 측면에서 제품의 품질 인증 수가 증가한다는 것은 좋은 현상으로 보여진다.
즉, 회귀분석을 이용해서 331개의 자료에 대한 분석을 실시하여 본 결과 시험일수에 영향을 미치는 변수는 기능성과 효율성으로 분류된 오류수인 것으로 조사되었다. 기능성이 시험일수에 가장 큰 영향을 주고 있고 사용성의 경우는 발견되는 오류가 많으나 시험일수에는 큰 영향을 주지 않는 것으로 조사되었다. 즉 예상 시험일수 산정을 위해서는 제품의 기능이 어느 정도인지를 기준으로 삼는 것이 가장 좋음을 알 수 있다.
시험기관의 자료를 이용해서 성별에 따라서 기능성(사용성, 일반적요구사항)의 오류를 발견하는 수에는 어떤 차이가 있는지 확인하기 위하여 평균차이 검정을 유의수준 5%에서 실시하였다. 데이터분석결과 기능성 오류수와 사용성 오류수는 성별에 따라서 차이가 있는 것으로 나타났으며, 특히 여성이 남성에 비하여 오류 발견 수가 많은 것으로 조사되었다. 일반적 요구사항의 경우 남성과 여성이 발견하는 오류 수에는 차이가 없는 것으로 조사되었다.
제품의 종류에 따라서 발견되어지는 오류수에는 다소 차이가 있는 것으로 분석되었다. 또한 성별에 따라서도 다소 차이가 나타나는 것으로 조사되었는데 여성이 남성에 비하여 발견하는 오류수는 대체적으로 품질 특성별로 모두 많은 것으로 분석되었으나 소요되는 시간에는 남성이 더 많이 소요되는 것으로 조사되었다. 제품별로는 데이터베이스 관련 제품이나 미들웨어 제품이나 GIS 제품이 다소 시험일수가 많이 소요되는 것으로 조사되었으며 교육용 소프트웨어 등이 다소 소요되는 시험일수가 짧은 것으로 조사되었다.
소요되는 시험 일자의 경우 최소 4일에서 최대 60일까지 소요되고 있었으며, 기능성 관련 오류의 경우 제품에 따라 다소 차이는 있겠지만 최저 0개에서 최대 81개인 것으로 조사되었다. 사용성의 경우 최저 0에서 최대 56개로 조사되어 제품별로 발견되어지는 오류에는 다소 차이가 큰 것으로 조사되었다. 제품의 종류별 시험일수의 차이를 살펴본 결과 시험일수가 많이 걸리는 제품으로는 데이터베이스 관련 제품과 미들웨어 제품과 GIS 관련 제품인 것으로 조사되었으며, 제품의 고장을 기반으로 조사한 결과 기능성과 사용성에 많은 오류가 발견된 제품으로는 시스템 소프트웨어와 GIS 제품인 것으로 분류되었다.
331개의 융합 소프트웨어를 통해서 시험 평가로 얻어진 자료를 분석한 결과 결함은 대체적으로 기능성과 사용성에서 많이 발생하는 것으로 조사되었으며, 제품의 종류에 따라서 많은 편차가 나타난다는 것을 알 수 있었다. 소요되는 시험 일자의 경우 최소 4일에서 최대 60일까지 소요되고 있었으며, 기능성 관련 오류의 경우 제품에 따라 다소 차이는 있겠지만 최저 0개에서 최대 81개인 것으로 조사되었다. 사용성의 경우 최저 0에서 최대 56개로 조사되어 제품별로 발견되어지는 오류에는 다소 차이가 큰 것으로 조사되었다.
유틸리티 프로그램과 기업용 소프트웨어와 보안 소프트웨어의 세 종류에 대해서 제품 특성별 오류수에 대한 분석을 실시하여 본 결과 기능성에 대한 오류는 기업용 소프트웨어가 가장 많은 것으로 조사되었으며 사용성에 대한 오류는 보안 소프트웨어가 가장 적고 기업용 소프트웨어가 가장 많이 발생하는 것으로 조사되었다. 일반적 요구사항의 경우 기업용 소프트웨어가 가장 많은 오류가 발생하는 것으로 조사되었다.
또한 성별에 따라서도 다소 차이가 나타나는 것으로 조사되었는데 여성이 남성에 비하여 발견하는 오류수는 대체적으로 품질 특성별로 모두 많은 것으로 분석되었으나 소요되는 시간에는 남성이 더 많이 소요되는 것으로 조사되었다. 제품별로는 데이터베이스 관련 제품이나 미들웨어 제품이나 GIS 제품이 다소 시험일수가 많이 소요되는 것으로 조사되었으며 교육용 소프트웨어 등이 다소 소요되는 시험일수가 짧은 것으로 조사되었다. 2016년 소프트웨어 시험을 위해 제시된 융합 평가 메트릭에 다소 변화가 생겼다.
사용성의 경우 최저 0에서 최대 56개로 조사되어 제품별로 발견되어지는 오류에는 다소 차이가 큰 것으로 조사되었다. 제품의 종류별 시험일수의 차이를 살펴본 결과 시험일수가 많이 걸리는 제품으로는 데이터베이스 관련 제품과 미들웨어 제품과 GIS 관련 제품인 것으로 조사되었으며, 제품의 고장을 기반으로 조사한 결과 기능성과 사용성에 많은 오류가 발견된 제품으로는 시스템 소프트웨어와 GIS 제품인 것으로 분류되었다. 다음은 소프트웨어 시험을 위한 비용에 가장 영향을 크게 줄 수 있는 시험일수에 대한 영향을 변인별로 파악하기 위해서 회귀분석 한 자료이다.
제품의 종류에 따라서 시험일수의 차이를 살펴본 결과 데이터베이스 관련 제품이 시험일수가 평균 23일로 가장 긴 것으로 조사되었으며 다음은 미들웨어가 22일, GIS 관련 제품이 21일로 조사되었다.
회귀분석 결과 위의 (1)번식과 같은 결과를 얻을 수 있었다. 즉, 회귀분석을 이용해서 331개의 자료에 대한 분석을 실시하여 본 결과 시험일수에 영향을 미치는 변수는 기능성과 효율성으로 분류된 오류수인 것으로 조사되었다. 기능성이 시험일수에 가장 큰 영향을 주고 있고 사용성의 경우는 발견되는 오류가 많으나 시험일수에는 큰 영향을 주지 않는 것으로 조사되었다.
회귀분석을 실시하여 본 결과 성별에 대한 가변수는 시험 일자에 영향을 주는 것으로 조사되었다.
후속연구
이러한 측면을 고려하여 고장데이터와 시험에 소요된 시간 등을 중요 변인을 통해서 분석하면 테스터가 제품을 평가하기 위한 기본적인 소요시간을 예측할 수 있고 이러한 예측을 통해서 소프트웨어 시험에 드는 총비용을 산정할 수 있을 것으로 보여진다. 실제 시험을 통해서 얻어진 자료를 ISO/IEC 25023의 기본 문서를 바탕으로 하여 품질을 평가할 수 있도록 연구가 필요하며 변형된 국제 표준 문서를 바탕으로 시험 데이터를 좀더 정확히 분석하여 시험일수에 대한 예측식을 산출하는 것이 중요할 것으로 보여진다.
이것으로 인해 소프트웨어 품질 특성별 오류수에 대한 변화도 나타날 것으로 보여진다. 이러한 측면을 고려하여 고장데이터와 시험에 소요된 시간 등을 중요 변인을 통해서 분석하면 테스터가 제품을 평가하기 위한 기본적인 소요시간을 예측할 수 있고 이러한 예측을 통해서 소프트웨어 시험에 드는 총비용을 산정할 수 있을 것으로 보여진다. 실제 시험을 통해서 얻어진 자료를 ISO/IEC 25023의 기본 문서를 바탕으로 하여 품질을 평가할 수 있도록 연구가 필요하며 변형된 국제 표준 문서를 바탕으로 시험 데이터를 좀더 정확히 분석하여 시험일수에 대한 예측식을 산출하는 것이 중요할 것으로 보여진다.
본 연구에서 소요되는 시간에 영향을 미치는 각각의 요인을 비교 검토하여 분석하면 제품별로 총 소요되는 소프트웨어 시험 평가 기간을 산정할 수 있다. 특히 제품의 종류와 성별에 따라서 시험일수에 차이를 보이고 있어 좀더 많은 데이터 확보를 통해서 시험기간을 예측할 수 있는 모델을 산정할 수 있을 것으로 보여진다.
질의응답
핵심어
질문
논문에서 추출한 답변
융합 소프트웨어 품질을 평가하기 위한 방안으로 제시한 8가지 차원이란?
국제 표준 ISO/IEC 25023에서는 기존의 표준문서 ISO/IEC 9126-2의 품질 평가를 위한 6가지 품질 특성을 8개로 확장해서 평가 방안을 제시하고 있다. ISO/IEC 9126-2에서 제시한 6가지 품질 특성으로는 기능성(Functionality), 신뢰성(Reliability), 사용성(Usability), 효율성(Efficiency), 유지보수성(Maintainability), 이식성 (Portability)으로 품질 평가 모델을 제시하고 있으나 2016년 국제 표준 투표를 완료한 ISO/IEC 25023의 품질 평가 모델에서는 기존의 6가지 품질특성에다가 보안성과 상호운영성을 품질 평가를 위한 품질 특성으로 제시하여 8가지 차원에서 융합 소프트웨어 품질을 평가하기 위한 방안을 제시하고 있다[3-7].
소프트웨어 제품의 품질을 향상시키기 위한 제도적 방안은 무엇인가?
국가적 차원에서 소프트웨어 제품의 품질을 향상시키기 위한 제도적 방안으로 GS 인증을 취득하고 나면 우선 구매 등의 혜택을 부여하여 개발업체에서 관심을 가지고 품질을 관리할 수 있도록 제도적 방안이 제시되어 있다. GS 인증제도란 소프트웨어의 품질 수준을 측정하기 위해서 국제표준에서 제시하고 있는 품질 융합 평가 메트릭을 기준으로 하여 제품의 품질을 정량적으로 평가하고 품질 평가 결과가 인증기준을 상회하면 인증을 부여하는 제도로, 소프트웨어 산업진흥법 시행규칙에 따라서 GS 인증을 부여 한다.
ISO/IEC 9126-2에서 제시한 6가지 품질 특성은?
국제 표준 ISO/IEC 25023에서는 기존의 표준문서 ISO/IEC 9126-2의 품질 평가를 위한 6가지 품질 특성을 8개로 확장해서 평가 방안을 제시하고 있다. ISO/IEC 9126-2에서 제시한 6가지 품질 특성으로는 기능성(Functionality), 신뢰성(Reliability), 사용성(Usability), 효율성(Efficiency), 유지보수성(Maintainability), 이식성 (Portability)으로 품질 평가 모델을 제시하고 있으나 2016년 국제 표준 투표를 완료한 ISO/IEC 25023의 품질 평가 모델에서는 기존의 6가지 품질특성에다가 보안성과 상호운영성을 품질 평가를 위한 품질 특성으로 제시하여 8가지 차원에서 융합 소프트웨어 품질을 평가하기 위한 방안을 제시하고 있다[3-7].
참고문헌 (15)
W. I. Keon, 'Software Testing for Developer', STA, 2010.
Y.L. Keon ,'Software Testing', Sang Nung, 2010.
ISO/IEC 25000 "Software and System engineering :Software product Quality Requirements and Evaluation (SQuaRE)-Guide to SQuaRE, 2005. 10,
ISO/IEC 25020 "Software engineering: Software product Quality Requirements and valuation (SQuaRE) -Measurement reference model and guide",2007.
ISO/IEC 25023 "Software engineering: Software product Quality Requirements and Evaluation (SQuaRE) - Measurment of system and software product quality", 2016.
Dirk Meyerhoff & Begona Laibarra, Rob Van Der Pouw Kraan, Alan Wallet., 'Software Quality and Software Testing in Internet Times', Springer Press, 2002.
S. Y. Kim, Y. T. Kim, S. J. Lee, "Influence Comparison of Customer Satisfaction using Quantile Regression Model", The Journal of Digital Police & Management, Vol 13. No 6,. 2015.
H.J. Jung, "The Effect Analysis of Software", The Journal of Digital Police & Management, Vol. 12. No 1. 2014.
H.Y.Lee, H.S. Yang, Convergence Performance Evaluation Model for Intrusion Protection System based on CC and ISO Standard, The Journal of Digital Police & Management, Vol. 13, No. 5, 2015.
S.W. Kang, H.S. Yang, "Quality Evaluation of Criterion Construction for Open Source Software", The Journal of Digital Police & Management, Vol 11, No 2, 2013.
H.J. Jung, Analysis of Data Applied Software Test Data, Journal of Digital Convergence, Vol 13, No 3, 2015.
H.J. Jung, Analysis of Testing Influence, Journal of Digital Convergence, Vol 12, No 3, 2014.
H.J. Jung, The Quality Analysis Model for Software Testing, Journal of Digital Convergence, Vol 11, No 3, 2013.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.