선택한 단어 수는 입니다.
최소 단어 이상 선택하여야 합니다.
최소 단어 이상 선택하여야 합니다.
선택한 단어 수는 30입니다.
최대 10 단어까지만 선택 가능합니다.
최대 10 단어까지만 선택 가능합니다.
문제 정의
- 따라서 본 논문에서는 간소화된 테스트 케이스를 얻어내고자 ISO/IEC/IEEE 29119-4 Test Techniques – Combinatorial Test Techniques에 포함된 Pair-wise 기법을 사용하여 2가지 모드, 10개의 수직 각도, 36개의 수평회전 각도의 테스트 요소의 모든 조합을 가진 테스트 케이스를 작성하기로 했다.
- 하지만 사람이 수기로 조합하는 데에는 많은 시간이 소요되며 실수가 따를 수 있음으로 Allpairs 라는 도구를 활용하여 자동으로 Pair-wise 조합을 만들었다. 이렇게 테스트 케이스를 간소화하여 주어진 테스팅 시간 안에 Throughput이 저하되는 케이스를 신속하게 파악하고 Throughput이 저하되는 요소에 대한 분석 결과를 개발팀에 전달하여 제품의 품질 수준을 높이는데 기여하고자 한다.
제안 방법
- Iperf는 TCP와 UDP 데이터를 전송하고 그것의 처리량을 측정하는 네트워크 Throughput 측정 도구이다[13]. Download, Upload에 따라 Iperf를 Server로 구동할 것인지, Client로 구동할 것인지를 결정하고 사용법에 맞게 진행한다.
- 제품의 바닥 면이 지면과 수평이고 무선 Router의 바닥 면이지면과 수평인 상태를 수직 각도 0도 기준으로 삼고 제품의 전면 부와 무선 Router의 전면부가 일직선인 각도를 수평각도 0도 기준으로 삼았다. Throughput의 측정은 Iperf라는 Open source 도구를 활용하였으며, 테스트 측정 요소를 바탕으로 Upload 측정 시 수직 각도 변경이 0도 일 때 수평 회전 각도를 0도에서 Throughput을 측정한 다음 수평 회전 각도를 10도로 변경하여 Throughput을 측정한다. 그 다음 수평 회전 각도를 20, 30, …, 350도 까지 수평각도 별로 측정한 이후 수직 각도를 10도로 변경하여 수평 회전각도 0, 10, 20, …, 350도까지 측정한다.
- 그 다음 수평 회전 각도를 20, 30, …, 350도 까지 수평각도 별로 측정한 이후 수직 각도를 10도로 변경하여 수평 회전각도 0, 10, 20, …, 350도까지 측정한다.
- 어떠한 각도로 마주보게 설치되던지 방송을 비롯하여 인터넷, Wi-Fi를 이용한 관련 서비스를 제공하기 위해서 무지향적으로 안정적인 성능을 낼 수 있어야 한다[9]. 따라서 스마트 셋톱박스가 무지향적으로 안정적인 속도를 낼 수 있는지 확인하기 위해 수평각도 변경으로 360도, 수직 각도 변경으로 0~90도로 제품을 회전 시키며 무선 라우터를 바라보는 각도를 변경시키고 각 조건 별로 Wi-Fi의 Throughput을 측정한다.
- 본 논문에서는 일정 기간의 테스팅을 통해 경험적으로 적절한 수직 각도 변경 기준과 회전각도 기준을 10도 간격으로 정하여 테스트를 했다. 따라서 측정 Mode 2개 요소, 수직 각도 변경 10개 요소, 수평 회전각도 36개 요소로 테스트 케이스를 720개 생성하여 진행했다. 사내 조건에서 테스팅을 위한 공간이 항상 Wi-Fi 제품군의 시험에만 사용되는 것이 아니므로 테스트 관련 물품 설치와 장소 점검이 필요하다.
- 본 논문에서는 일정 기간의 테스팅을 통해 경험적으로 적절한 수직 각도 변경 기준과 회전각도 기준을 10도 간격으로 정하여 테스트를 했다. 따라서 측정 Mode 2개 요소, 수직 각도 변경 10개 요소, 수평 회전각도 36개 요소로 테스트 케이스를 720개 생성하여 진행했다.
- 그로 인해 약점 부위의 문제점이 발생하지 않는 부위에도 혼돈이 발생할 가능성이 있다. 이러한 문제는 추후 다른 그래프 도식 도구를 이용해 해결할 계획이며, 일단 현재 사용하는 엑셀의 방사형 그래프를 구성하는데 있어서는 수직 각도 변경마다 데이터의 시작이 되는 수평 회전각도 0도의 데이터를 Download 모드일 때 10도, 30도, 50도, 70도, 90도일 때, Upload 모드일 때 0도, 20도, 40도, 60도, 80도 각각 5건씩 총 10건을 추가해 방사형 그래프의 형태를 완성했다.
- 제품과 무선 Router는 바닥에 설치되는 경우보다 어딘가에 올려놓고 사용하는 경우가 많다고 생각되어 1m 높이의 사무용 서랍 겸 책꽂이에 두 기기 사이의 거리가 10m가 되도록 설치했다. 제품의 바닥 면이 지면과 수평이고 무선 Router의 바닥 면이지면과 수평인 상태를 수직 각도 0도 기준으로 삼고 제품의 전면 부와 무선 Router의 전면부가 일직선인 각도를 수평각도 0도 기준으로 삼았다. Throughput의 측정은 Iperf라는 Open source 도구를 활용하였으며, 테스트 측정 요소를 바탕으로 Upload 측정 시 수직 각도 변경이 0도 일 때 수평 회전 각도를 0도에서 Throughput을 측정한 다음 수평 회전 각도를 10도로 변경하여 Throughput을 측정한다.
- 통신 환경이 좋지 않으면 Wi-Fi의 Throughput이 저하된다는 사실[10]에 기인하여 제품이 무선 Router를 바라보는 각도를 여러 케이스로 만들어 각 케이스마다 Wi-Fi의 Throughput이 어느 정도인지를 측정한다. 테스트 빈도와 비용 문제로 외부의 전문 차폐 시설을 갖춘 시험소에서 진행하기에 어려움이 따라 사옥에서 확보할 수 있는 최대 공간과 Wi-Fi 시설이 없는 장소를 찾아 지하 강당에서 시험을 진행하였다. 지하 강당에서 시험에 확보할 수 있는 시험 공간은 15m x 15m의 공간이었으며, 해당 공간에 Wi-Fi analyzer를 사용하여 2.
- Pair-wise 기법은 각 파라미터들을 일일이 기재하고 각 파라미터가 가지는 여러 가지의 값들을 일일이 손으로 조합할수도 있으나, 파라미터나 각 파라미터가 가지는 값의 개수가 많아지게 되면 실제 개발, 테스팅 환경에서는 조합만 하다가 주어진 시간이 종료될 수도 있다. 테스트 케이스 조합에 드는 시간을 절약하기 위해 여러 전문가들은 파라미터와 각 파라미터가 가지는 여러 가지 값을 나열하면 자동으로 Pair-wise 기법으로 테스트 케이스를 산출할 수 있는 Tool을 개발하고 공개했다. 그 중 Allpairs는 http://www.
- 따라서 본 논문에서는 간소화된 테스트 케이스를 얻어내고자 ISO/IEC/IEEE 29119-4 Test Techniques – Combinatorial Test Techniques에 포함된 Pair-wise 기법을 사용하여 2가지 모드, 10개의 수직 각도, 36개의 수평회전 각도의 테스트 요소의 모든 조합을 가진 테스트 케이스를 작성하기로 했다. 하지만 사람이 수기로 조합하는 데에는 많은 시간이 소요되며 실수가 따를 수 있음으로 Allpairs 라는 도구를 활용하여 자동으로 Pair-wise 조합을 만들었다. 이렇게 테스트 케이스를 간소화하여 주어진 테스팅 시간 안에 Throughput이 저하되는 케이스를 신속하게 파악하고 Throughput이 저하되는 요소에 대한 분석 결과를 개발팀에 전달하여 제품의 품질 수준을 높이는데 기여하고자 한다.
대상 데이터
- Allpairs를 이용하여 총 360개의 테스트 케이스를 자동으로 생성하였다. 추후 수집된 결과 값 데이터를 엑셀을 활용해서 방사형 그래프로 도식할 경우 수직 각도 변경의 최초 케이스의 값이 없으면 그래프의 형태가 완성되지 않는다.
이론/모형
- 4Ghz 대역의 다른 무선 신호가 없음을 확인하고 진행하였다. 테스트 시료가 지원하는 무선 방식이 802.11n이기에 Wi-Fi 방식으로 최근 가장 많이 쓰이는 802.11n 방식[11][12]을 사용한다. 'Throughput' 즉 처리량을 테스트하기 위해서는 가장 많은 데이터를 처리하게끔 부하를 주어야 하며, 암호화로 인해 테스트 시료와 그에 매칭되는 무선 Router에서 발생하는 손실을 줄이고자 40M bandwidth를 사용하고 암호화는 적용하지 않았다.
성능/효과
- 전체 테스트 케이스의 결과를 방사형 그래프로 도식화한 결과를 그림 3에 표시하였으며, 수직 70, 80, 90의 각도에서 성능이 저하되고, 수평 10도, 130도 근처에서 성능이 저하됨을 확인할 수 있다. Allpairs를 이용해 생성한 테스트 케이스의 결과가 그림 4에 나타나 있으며, 전체 테스트 케이스의 결과를 방사형 그래프로 도식화한 결과를 그림 3에 표시하였으며, 수직 70, 80, 90의 각도에서 성능이 저하되고, 수평 10도, 130도 근처에서 성능이 저하됨을 확인할 수 있다. 시험에 사용한 시료는 주먹보다 작은 외관과 내장형 안테나가 외부로 도출되는 안테나를 대체함으로 인해 문제가 발생할 수 있으며, 유사한 구조물과 회로가 적용된 제품군은 비슷한 유형의 문제가 지속적으로 발생하는 것을 확인하였다.
- 시험에 사용한 시료는 주먹보다 작은 외관과 내장형 안테나가 외부로 도출되는 안테나를 대체함으로 인해 문제가 발생할 수 있으며, 유사한 구조물과 회로가 적용된 제품군은 비슷한 유형의 문제가 지속적으로 발생하는 것을 확인하였다. 따라서 Pair-wise 도구인 Allpairs로 얻어낸 테스트 케이스로 Wi-Fi 방향성의 약점 부위를 찾아낼 수 있으며, 테스트에 소요되는 시간이 전체 테스트 케이스를 수행하는 것에 비해 48.61%가 단축됨으로 전체 테스트 케이스 수행하는데 있어 12시간이 소요되던 시간을 6.17시간으로 단축할 수 있다. 이렇게 테스트 시간이 단축됨으로써 테스트를 진행하는 인원이 해당 테스트를 완료하고 장애물 환경이나 암호화된 방식에서의 테스트 또는 실제 사용자 입장에서 발생할 수 있는 다른 테스트를 진행할 수 있고, 또 다른 생산적인 업무를 진행할 수도 있으며 조금이나마 일찍 문제점을 발견함으로써 전체 개발 일정을 앞당길 수 있다.
- Allpairs를 이용해 생성한 테스트 케이스의 결과가 그림 4에 나타나 있으며, 전체 테스트 케이스의 결과를 방사형 그래프로 도식화한 결과를 그림 3에 표시하였으며, 수직 70, 80, 90의 각도에서 성능이 저하되고, 수평 10도, 130도 근처에서 성능이 저하됨을 확인할 수 있다. 시험에 사용한 시료는 주먹보다 작은 외관과 내장형 안테나가 외부로 도출되는 안테나를 대체함으로 인해 문제가 발생할 수 있으며, 유사한 구조물과 회로가 적용된 제품군은 비슷한 유형의 문제가 지속적으로 발생하는 것을 확인하였다. 따라서 Pair-wise 도구인 Allpairs로 얻어낸 테스트 케이스로 Wi-Fi 방향성의 약점 부위를 찾아낼 수 있으며, 테스트에 소요되는 시간이 전체 테스트 케이스를 수행하는 것에 비해 48.
- 4GHz의 Bluetooth 기능과 동시 사용과 같은 Wi-Fi의 Throughput에 영향을 미칠 수 있는 여러 케이스를 테스트해야 할 것이다. 이에 따라 테스트해야 할 조건과 테스트 케이스가 기하급수적으로 증가할 것으로 예상되지만 본문에서 언급한 Pair-wise 기법을 적용하면 테스트 케이스를 효과적으로 간소화할 수 있다.
- 전체 테스트 케이스의 결과를 방사형 그래프로 도식화한 결과를 그림 3에 표시하였으며, 수직 70, 80, 90의 각도에서 성능이 저하되고, 수평 10도, 130도 근처에서 성능이 저하됨을 확인할 수 있다. Allpairs를 이용해 생성한 테스트 케이스의 결과가 그림 4에 나타나 있으며, 전체 테스트 케이스의 결과를 방사형 그래프로 도식화한 결과를 그림 3에 표시하였으며, 수직 70, 80, 90의 각도에서 성능이 저하되고, 수평 10도, 130도 근처에서 성능이 저하됨을 확인할 수 있다.
- 제안하는 방법을 적용한 실험 결과, 테스트 케이스의 단축과 소요 시간 단축의 측면에서 전체 테스트 케이스 720개를 진행하였을 때 소요 시간이 720분이 소요되었으나 Pair-wise 기법을 적용하여 테스트를 진행하게 되면 360개의 테스트 케이스를 가지고 테스트를 진행하며 360분이 소요 됨으로 모든 테스트 요소가 테스트 되면서도 테스트에 소요되는 시간은 전체 테스트 케이스를 진행한 것 대비 50%가 단축 됨을 확인했다. 추가로 엑셀의 방사형 그래프를 완성하기 위해 진행한 10개 테스트 케이스에 소요되는 10분을 추가하여 370분이 소요되면 기존의 테스트 방법 대비 48.
- 테스트 빈도와 비용 문제로 외부의 전문 차폐 시설을 갖춘 시험소에서 진행하기에 어려움이 따라 사옥에서 확보할 수 있는 최대 공간과 Wi-Fi 시설이 없는 장소를 찾아 지하 강당에서 시험을 진행하였다. 지하 강당에서 시험에 확보할 수 있는 시험 공간은 15m x 15m의 공간이었으며, 해당 공간에 Wi-Fi analyzer를 사용하여 2.4Ghz 대역의 다른 무선 신호가 없음을 확인하고 진행하였다. 테스트 시료가 지원하는 무선 방식이 802.
- 하지만 이론적으로 그 효용성이 입증되고, 현재 처한 자원적 어려움을 해소하기 위한 전략으로 조합 테스팅 기법을 도입하게 되면, 커버해야 할 범위에 비해 상대적으로 적은 양의 테스트로 결함 또는 특성을 찾아낼 수 있다[6][7]. 진행해야 할 테스트 케이스가 줄어든다는 것은 자원적 어려움도 그만큼 감소시킬 수 있다는 의미이므로 ISO/IEC 29114-4의 조합 테스팅 기법 중 하나인 Pair-wise 기법을 테스트 케이스 설계에 적용하고, Pair-wise 기법을 기반으로 테스트 케이스를 자동으로 만들어 주는 Allpairs 도구를 이용하여 기존의 테스트 케이스 720개를 370개로 간소화하였고, 문제가 발생하는 조건에 대해 발견이 가능함을 확인하였다.
- 제안하는 방법을 적용한 실험 결과, 테스트 케이스의 단축과 소요 시간 단축의 측면에서 전체 테스트 케이스 720개를 진행하였을 때 소요 시간이 720분이 소요되었으나 Pair-wise 기법을 적용하여 테스트를 진행하게 되면 360개의 테스트 케이스를 가지고 테스트를 진행하며 360분이 소요 됨으로 모든 테스트 요소가 테스트 되면서도 테스트에 소요되는 시간은 전체 테스트 케이스를 진행한 것 대비 50%가 단축 됨을 확인했다. 추가로 엑셀의 방사형 그래프를 완성하기 위해 진행한 10개 테스트 케이스에 소요되는 10분을 추가하여 370분이 소요되면 기존의 테스트 방법 대비 48.61%가 단축된다. Pair-wise기법을 활용하면 720분이 소요되던 테스트가 370분으로 단축되었다.
- 테스트의 결과 측면에서 전체 케이스를 수행한 결과와 본론의 Pair-wise 기법을 이용해 간소화한 진행 방법의 결과가방사형 그래프로 표현했을 때 형태의 유사함을 확인했고, 문제가 있는 부위의 파악이 가능함으로 간소화된 테스트 케이스에서도 문제점의 검출 능력이 있음을 확인했다. 따라서 본 논문에서 제안한 내용을 개발 단계 또는 고객에게 전달될 프로토타입 제품을 테스트할 때 적용할 수 있다.
후속연구
- 테스트의 결과 측면에서 전체 케이스를 수행한 결과와 본론의 Pair-wise 기법을 이용해 간소화한 진행 방법의 결과가방사형 그래프로 표현했을 때 형태의 유사함을 확인했고, 문제가 있는 부위의 파악이 가능함으로 간소화된 테스트 케이스에서도 문제점의 검출 능력이 있음을 확인했다. 따라서 본 논문에서 제안한 내용을 개발 단계 또는 고객에게 전달될 프로토타입 제품을 테스트할 때 적용할 수 있다. 추후 사용자 환경 상 요구되는 여러 종류의 장애물, 5GHz 대역의 Wi-Fi와 동시 사용 조건, 2.
- 따라서 본 논문에서 제안한 내용을 개발 단계 또는 고객에게 전달될 프로토타입 제품을 테스트할 때 적용할 수 있다. 추후 사용자 환경 상 요구되는 여러 종류의 장애물, 5GHz 대역의 Wi-Fi와 동시 사용 조건, 2.4GHz의 Bluetooth 기능과 동시 사용과 같은 Wi-Fi의 Throughput에 영향을 미칠 수 있는 여러 케이스를 테스트해야 할 것이다. 이에 따라 테스트해야 할 조건과 테스트 케이스가 기하급수적으로 증가할 것으로 예상되지만 본문에서 언급한 Pair-wise 기법을 적용하면 테스트 케이스를 효과적으로 간소화할 수 있다.
- Allpairs를 이용하여 총 360개의 테스트 케이스를 자동으로 생성하였다. 추후 수집된 결과 값 데이터를 엑셀을 활용해서 방사형 그래프로 도식할 경우 수직 각도 변경의 최초 케이스의 값이 없으면 그래프의 형태가 완성되지 않는다. 그로 인해 약점 부위의 문제점이 발생하지 않는 부위에도 혼돈이 발생할 가능성이 있다.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.