[논문]ISO/IEC 25023을 활용한 소프트웨어 정량적 평가지표 분석

김수욱; 박유현

doi:10.6109/jkiice.2019.23.1.7

ISO/IEC 25023을 활용한 소프트웨어 정량적 평가지표 분석
Analysis of software quantitative evaluation index using ISO/IEC 25023 원문보기

한국정보통신학회논문지 = Journal of the Korea Institute of Information and Communication Engineering, v.23 no.1, 2019년, pp.7 - 12

김수욱 (Convergence of IT Devices Institutes Busan) , 박유현 (Department of Computer Software Engineering, Dong-Eui University)

초록
AI-Helper

정부지원 R&D 사업을 수행하는 기업들은 사업계획서 상에 정량적 평가지표를 제안하고 있다. 그러나 많은 기업들은 정량적 평가지표를 선정하는데 어려움을 겪고 있고 잘못된 평가지표의 선정으로 정량적 결과 도출이 어려운 경우도 있다. 본 논문에서는 기업들이 선정한 정량적 평가지표를 소프트웨어 품질을 정량적으로 측정할 수 있는 ISO/IEC 25023표준에 접목하여 그 경향을 분석한다. 먼저 분석 대상 데이터에 대한 수집방법과 공인시험기관에서 시험한 제품에 대해 산업분야별로 분류하고 기업에서 선정한 정량적 평가지표를 ISO/IEC 25023 표준의 8가지 품질특성별로 분석한다. 다음으로 ISO/IEC 25023 표준의 8가지 품질특성으로 분류한 정량적 평가지표에 대한 분석 결과를 바탕으로 기업들의 주로 선정하는 정량적 평가지표의 품질특성의 경향을 파악하고자 한다. 이를 통해 소프트웨어 제품의 품질을 평가할 수 있는 정량적 평가지표 선정에 도움이 될 것으로 기대된다.

Abstract ▼ AI-Helper

Variety of companies which carry out R&D projects supported by government are proposing quantitative evaluation index business plans. However, Many companies have difficulties in aspects of selecting quantitative evaluation index and in some cases they have troubles to get results from selecting unsuitable evaluation index. First of all, both methods of gathering the data to be analyzed and the products which are tested by the accredited testing institutes classifying by industrial sectors are classified as the quantitative evaluation index selected by the company according to the eight quality characteristics of ISO/IEC 25023 Standard. Secondly, based on the results of the quantitative evaluation indexes classified into eight quality characteristics of the ISO/IEC 25023 standard, the tendency of the quality characteristics of the quantitative evaluation indexes selected mainly by the companies will be understandable. It is hopefully expected that this research will be helpful to select a quantitative evaluation index to evaluate the quality of software products.

주제어

표/그림 (9)

그림 Fig. 1 ISO/IEC 25023 Characteristics
그림 Fig. 2 A procedures for conducting the test of a verified testing institute
그림 Fig. 3 A number of test products sorting by year
그림 Fig. 4 A number of industrial classifications of test products
그림 Fig. 5 A procedure of analysing quality evaluation index
표 Table. 1 A classification of test products by industrial classification
그림 Fig. 6 Analysis evaluation index of functional suitability and performance efficiency
그림 Fig. 7 Analysing evaluation index of Reliability and portability
그림 Fig. 8 Analysis evaluation index of maintainability and compatibility

AI 본문요약
AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

문제 정의

본 논문에서는 국내 정부지원 R&D 사업에 제시된 소프트웨어에 대한 정량적 평가지표를 ISO/IEC 25023 표준에 따라 분석하고자 한다.
본 논문에서는 정부지원 R&D 사업의 결과물인 소프 트웨어 제품의 품질수준을 정량적으로 평가할 수 있는 방안을 연구하기 위해 2016년~2018년 시험을 수행한 정량적 평가지표를 ISO/IEC 25023 표준의 8가지 품질 특성과 하위에 있는 부특성, 부특성 하위에 있는 메트릭에 매핑하여 분석하였다.
본 논문에서는 기업들이 선정한 정량적 평가지표에 ISO/IEC 25023 표준의 8가지 품질특성과 하위에 있는 부특성, 부특성 하위에 있는 메트릭에 매핑하여 분석한다. 분석결과를 토대로 기업들이 선정한 정량적 평가지 표의 경향을 파악하고자 한다.

제안 방법

분석기간은 2018년 7월 중 1주일 동안 분석을 진행하였다. 두 개의 그룹은 내부적으로 시험항 목을 ISO/IEC 25023의 8가지 품질특성으로 분류한 후품질특성 하위에 있는 부특성과 부특성 하위에 있는 메트릭을 매핑하는 방법으로 수행하였다. 또한, 분석 작업중 연구원간 이견이 발생한 경우에는 내부 협의로 결정 하여 정리하였으며 그림 5는 정량적 평가지표의 분석 과정을 표현하고 있다.
분석 대상 데이터는 A 공인시험기관에서 규정된 시험 수행 절차에 따라 수집되었으며 그림 2는 공인시험 기관의 시험 수행 절차를 설명하고 있다. 먼저 성적서가 필요한 기업으로부터 정량적 평가지표에 대한 내용을 전달받은 뒤 시험 가능여부를 판단한 후 시험이 가능하 다면 신청서류를 전달하여 수령한다. 신청 기업은 의뢰한 제품에 대해 시험수행을 위한 협의를 진행 후 시험을 진행한다.
본 논문에서는 기업들이 선정한 정량적 평가지표에 ISO/IEC 25023 표준의 8가지 품질특성과 하위에 있는 부특성, 부특성 하위에 있는 메트릭에 매핑하여 분석한다. 분석결과를 토대로 기업들이 선정한 정량적 평가지 표의 경향을 파악하고자 한다.
본 논문에서 사용된 데이터는 시험기관에서 규정된 시험절차에 따라 시험을 수행하여 성적서가 발행된 시험항목을 분석하여 ISO/IEC 25023의 품질특성과 매핑 하였다. 이를 위해 ISO/IEC 9126-2, ISO/IEC 25023 표준을 이해하고 다양한 소프트웨어 제품을 2년 이상 시험한 경험이 있는 연구원 6명을 두 그룹으로 나누어 분석하였다. 첫 번째 그룹은 ICT/가전 분야를 분석하고 두번째 그룹은 ICT/가전 분야 이외의 분야로 나누어 분석을 진행하였다.
이를 위해 ISO/IEC 9126-2, ISO/IEC 25023 표준을 이해하고 다양한 소프트웨어 제품을 2년 이상 시험한 경험이 있는 연구원 6명을 두 그룹으로 나누어 분석하였다. 첫 번째 그룹은 ICT/가전 분야를 분석하고 두번째 그룹은 ICT/가전 분야 이외의 분야로 나누어 분석을 진행하였다. 분석기간은 2018년 7월 중 1주일 동안 분석을 진행하였다.

대상 데이터

본 논문에서 사용된 데이터는 시험기관에서 규정된 시험절차에 따라 시험을 수행하여 성적서가 발행된 시험항목을 분석하여 ISO/IEC 25023의 품질특성과 매핑 하였다. 이를 위해 ISO/IEC 9126-2, ISO/IEC 25023 표준을 이해하고 다양한 소프트웨어 제품을 2년 이상 시험한 경험이 있는 연구원 6명을 두 그룹으로 나누어 분석하였다.
본 논문에서는 개발된 소프트웨어의 품질 수준을 평 가하기 위하여 A 소프트웨어 공인시험기관이 2016년 5 월부터 2018년 7월까지 성적서를 발행한 69개 기업 100 개의 소프트웨어 제품의 시험항목에 대한 분석 작업을 진행하였다. 100개의 소프트웨어 제품에 대한 시험항목은 총 353건이었다.
분석 대상 데이터는 A 공인시험기관에서 규정된 시험 수행 절차에 따라 수집되었으며 그림 2는 공인시험 기관의 시험 수행 절차를 설명하고 있다. 먼저 성적서가 필요한 기업으로부터 정량적 평가지표에 대한 내용을 전달받은 뒤 시험 가능여부를 판단한 후 시험이 가능하 다면 신청서류를 전달하여 수령한다.
첫 번째 그룹은 ICT/가전 분야를 분석하고 두번째 그룹은 ICT/가전 분야 이외의 분야로 나누어 분석을 진행하였다. 분석기간은 2018년 7월 중 1주일 동안 분석을 진행하였다. 두 개의 그룹은 내부적으로 시험항 목을 ISO/IEC 25023의 8가지 품질특성으로 분류한 후품질특성 하위에 있는 부특성과 부특성 하위에 있는 메트릭을 매핑하는 방법으로 수행하였다.

성능/효과

8가지의 품질특성 중 기능적합성과 성능효율성은 8 가지로 분류된 모든 산업분류에 공통적으로 가장 중요한 시험항목으로 분석되었다. 이는 정부지원 R&D 사업의 특성상 기존에 존재하는 기술보다는 새로운 기술 또는 기능 등의 아이디어를 제안해야만 사업에 선정될 확률이 높아지므로 사업을 지원하는 대부분의 기업은 새로운 기술개발과 관련된 아이디어를 제안할 수밖에 없고 정량적 평가지표도 대부분이 R&D 사업 목적에 부합 하는 핵심기술(또는 기능)과 성능을 확인 및 평가하는 방향으로 제시하고 있는 것을 보여주고 있다.
분석결과, 모든 산업분야에서 기능적합성과 성능효율성 품질특성이 중요한 정량적 평가지표로 분석되었다. 그리고 호환성, 신뢰성 등의 6 가지 품질특성과 관련한 정량적 평가지표 수가 미미한 것을 보면 기업들이 정량적 평가지표 선정 시 기능성, 성능효율성 품질특성과 관련한 평가지표에 치우치는 경향이 많음을 확인하였다.
그림 8은 유지보수성과 호환성 하위의 세부 메트릭별로 정량적 평가지표 수를 분석한 결과로서 유지보수성은총 13개의 메트릭 중에서 코딩 규칙의 적합성 3건(37%), 순환복잡도 적정성 5건(63%)이었으며, 호환성은 총 4개의 메트릭 중에서 데이터 교환 프로토콜 충분성 메트릭 2 건(67%), 외부 인터페이스 적정성 메트릭 1건(33%)이었다. 사용성은 총 22개의 메트릭 중에서 지원언어의 적정성 메트릭 1건이었으며 보안성은 총 11개의 메트릭 중정량적 평가지표가 한건도 존재하지 않았다.
표 1의 결과를 ISO/IEC 25023의 세부 메트릭별로 상세히 분석해보면 기능적합성은 총 4개의 메트릭으로 구성되는데, 기능적합성 품질특성에 분류된 207건의 항목 전부가 기능정확성 메트릭 하나에만 해당되었고, 나머지 3개의 메트릭에 적합한 정량적 평가지표는 존재하지 않았다. 또한, 성능효율성에 해당하는 111건의 정량적 평가지표는 총 12개의 메트릭 중에서 평균 응답시간 30 건(27%), 평균 반환시간 26건(24%), 평균 처리량 28건 (25%)으로 3개의 메트릭에 84건이 해당되어 약 76%를차지한 것으로 분석되었으며, 그림 6과 같다.
본 논문에서는 정부지원 R&D 사업의 결과물인 소프 트웨어 제품의 품질수준을 정량적으로 평가할 수 있는 방안을 연구하기 위해 2016년~2018년 시험을 수행한 정량적 평가지표를 ISO/IEC 25023 표준의 8가지 품질 특성과 하위에 있는 부특성, 부특성 하위에 있는 메트릭에 매핑하여 분석하였다. 분석결과, 모든 산업분야에서 기능적합성과 성능효율성 품질특성이 중요한 정량적 평가지표로 분석되었다. 그리고 호환성, 신뢰성 등의 6 가지 품질특성과 관련한 정량적 평가지표 수가 미미한 것을 보면 기업들이 정량적 평가지표 선정 시 기능성, 성능효율성 품질특성과 관련한 평가지표에 치우치는 경향이 많음을 확인하였다.
위의 산업분류별 시험항목 수를 보면 기능적합성 관련 시험항목 수가 전체 시험항목 수의 약 59%, 성능효 율성 관련 시험항목 수가 약 31%로 두 가지 품질특성 관련 시험항목 수가 전체의 약 90%로 압도적인 비중을 차지하고 있는 것으로 조사되었다. 그 외의 호환성, 사용성, 신뢰성, 보안성, 유지보수성, 이식성 관련 시험항목 수는 35건으로 미미한 수준이었다.
그림 7은 신뢰성과 이식성 하위의 세부 메트릭별로 정량적 평가지표 수를 분석한 결과로서 신뢰성은 총 11 개의 메트릭 중에서 평균 결함통지 시간 1개의 메트릭이 6건(55%)으로 전체 11건 중 절반 이상을 차지하였다. 이식성은 총 9개의 메트릭 중에서 하드웨어 환경 적응성, 시스템 소프트웨어 환경 적응성 메트릭이 각각 6건 (50%)씩을 차지하였다.
표 1의 결과를 ISO/IEC 25023의 세부 메트릭별로 상세히 분석해보면 기능적합성은 총 4개의 메트릭으로 구성되는데, 기능적합성 품질특성에 분류된 207건의 항목 전부가 기능정확성 메트릭 하나에만 해당되었고, 나머지 3개의 메트릭에 적합한 정량적 평가지표는 존재하지 않았다. 또한, 성능효율성에 해당하는 111건의 정량적 평가지표는 총 12개의 메트릭 중에서 평균 응답시간 30 건(27%), 평균 반환시간 26건(24%), 평균 처리량 28건 (25%)으로 3개의 메트릭에 84건이 해당되어 약 76%를차지한 것으로 분석되었으며, 그림 6과 같다.

후속연구

향후에는 정부지원 R&D 사업을 지원하는 기업이 ISO/IEC 25023 표준의 기능성, 효율성 이외의 6가지 품질특성을 활용하여 소프트웨어 제품의 품질을 정량적 으로 평가할 수 있는 평가지표의 선정방법에 대한 연구를 진행할 예정이다.

질의응답

핵심어	질문	논문에서 추출한 답변
	과거와 현재의 소프트웨어의 차이는 무엇인가?	4차 산업혁명은 ICT융합으로 이루어지는 차세대 혁명이며 그 중 소프트웨어는 핵심역량으로 자리매김하고 있다. 과거 소프트웨어는 ERP로 대표되는 관리시스템 등 업무지원 중심이었다면 현재의 소프트웨어는 우리의 생활과 안전, 환경 등 모든 분야에 적용되고 있을 만큼 현재 소프트웨어는 복잡하고 고도화된 신기술의 집약체이며 이에 따른 소프트웨어 품질의 중요성은 이제 필수적 요소로 대두되고 있다[1].
	정량적 평가지표 항목이란?	정부 및 공공기관의 정부지원 R&D 사업 또한 4차 산업혁명에 걸맞게 변모하고 있으며 국내 많은 ICT기업 들은 정부 및 공공기관에서 시행하는 소프트웨어 관련 정부지원 R&D 사업에 참여하고 있다. 사업에 참여하기 위해서는 기관에서 제시된 양식에 따라 사업계획서를 작성해야 하며 이 중 정량적 평가지표 항목은 사업 수행에 있어 달성해야 하는 기술 및 기능의 기준과 목표치를 제시하는 것으로 제시한 목표에 대해 필수적으로 달성 해야 하는 항목이다[2].
	ISO/IEC 25023 표준의 8가지 품질특성과 메트릭에 매핑하여 분석한 결과는 어떠한가?	본 논문에서는 정부지원 R&D 사업의 결과물인 소프 트웨어 제품의 품질수준을 정량적으로 평가할 수 있는 방안을 연구하기 위해 2016년~2018년 시험을 수행한 정량적 평가지표를 ISO/IEC 25023 표준의 8가지 품질 특성과 하위에 있는 부특성, 부특성 하위에 있는 메트릭에 매핑하여 분석하였다. 분석결과, 모든 산업분야에서 기능적합성과 성능효율성 품질특성이 중요한 정량적 평가지표로 분석되었다. 그리고 호환성, 신뢰성 등의 6 가지 품질특성과 관련한 정량적 평가지표 수가 미미한 것을 보면 기업들이 정량적 평가지표 선정 시 기능성, 성능효율성 품질특성과 관련한 평가지표에 치우치는 경향이 많음을 확인하였다.

표제어: PCR

동의어: Packet Collision Rate

용어 설명 출처 목록 (6)

용어 설명: PCR은 세균 특이성이 있는 primer를 이용하여 적은 수의 세균이 있을지라도 쉽게 검출할 수 있는 유용한 방법이며, 이를 이용하여 구강 내 치면세균막이나 타액에서 직접 세균을 검출할 수 있게 되었다[8].

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증