본 연구에서는 모바일 검색의 주 이용자 계층인 대학생들을 대상으로 이들의 모바일 검색 행태를 조사하고, 설문조사와 실험을 통하여 검색 포털들의 모바일 검색 서비스에 대한 평가를 수행하고자 한다. 즉, 실제 이용자들이 실제 질의를 이용하여 모바일 검색을 수행한 후, 검색 포털들의 모바일 검색 서비스를 다양한 기준에 근거하여 평가하고, 모바일 검색 서비스에 대한 개선 방안을 제시하고자 한다. 조사 결과, 검색 포털의 모바일 검색에서 개선이 가장 시급한 분야는 컨텐츠로 나타났으며, 이어서 인터페이스, 접근성, 모바일 검색 기능 등의 순으로 나타났다. 본 연구의 결과는 향후 포털들의 모바일 검색 서비스의 개선에 기여할 수 있을 것으로 기대된다.
본 연구에서는 모바일 검색의 주 이용자 계층인 대학생들을 대상으로 이들의 모바일 검색 행태를 조사하고, 설문조사와 실험을 통하여 검색 포털들의 모바일 검색 서비스에 대한 평가를 수행하고자 한다. 즉, 실제 이용자들이 실제 질의를 이용하여 모바일 검색을 수행한 후, 검색 포털들의 모바일 검색 서비스를 다양한 기준에 근거하여 평가하고, 모바일 검색 서비스에 대한 개선 방안을 제시하고자 한다. 조사 결과, 검색 포털의 모바일 검색에서 개선이 가장 시급한 분야는 컨텐츠로 나타났으며, 이어서 인터페이스, 접근성, 모바일 검색 기능 등의 순으로 나타났다. 본 연구의 결과는 향후 포털들의 모바일 검색 서비스의 개선에 기여할 수 있을 것으로 기대된다.
This study aims to investigate information seeking behavior of mobile-based Web users, especially, college students. This study also evaluates mobile search services based on various criteria, and suggests how to improve portal's mobile search services. The results of this study show that the most u...
This study aims to investigate information seeking behavior of mobile-based Web users, especially, college students. This study also evaluates mobile search services based on various criteria, and suggests how to improve portal's mobile search services. The results of this study show that the most urgent improvement is needed in the contents of mobile search services. Improvements are also required in the area of interface design followed by accessibility and mobile search functionalities. The results of this study can be applied to the portal's effective development of mobile search services.
This study aims to investigate information seeking behavior of mobile-based Web users, especially, college students. This study also evaluates mobile search services based on various criteria, and suggests how to improve portal's mobile search services. The results of this study show that the most urgent improvement is needed in the contents of mobile search services. Improvements are also required in the area of interface design followed by accessibility and mobile search functionalities. The results of this study can be applied to the portal's effective development of mobile search services.
* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.
문제 정의
이처럼 실제 이용자들의 실제 질의를 선택한 이유는 이용자들의 질의가 이용자들의 웹 자료에 대한 실제 정보 요구를 반영한다고 판단되었기 때문이다. 따라서 이 연구에서는 다양한 주제 분야의 질의를 대상으로 모바일 검색을 평가하기 위하여 이용자들의 실제 질의를 활용하기로 하였다. 좀 더 구체적으로, 수강생들이 본인이 관심 있는 주제 분야의 질의 8개씩을 선정하였으며, 이 때, 대중적 질의와 전문적인 질의를 절반씩 선택하고, 또한 한글과 영어 질의를 절반씩 선택하도록 하였다.
본 연구에서는 모바일 검색의 주 이용자 계층인 대학생들을 대상으로 이들의 모바일 검색 행태를 조사하고, 설문조사와 실험을 통하여 검색 포털들의 모바일 검색 서비스에 대한 평가를 수행하였다. 즉, 실제 이용자들이 실제 질의를 이용하여 모바일 검색을 수행한 후, 검색 포털들의 모바일 검색 서비스를 컨텐츠, 인터페이스, 모바일 검색 기능, 접근성 등의 기준에 근거하여 평가하고, 모바일 검색 서비스에 대한 다양한 개선 방안을 제시하였다.
즉, 국내외 선행 연구들 중에서 스마트폰을 이용한 정보 탐색 행태나 정보 기기 이용 행태를 조사한 연구는 존재하지만, 실제 이용자들이 모바일 검색에 대한 평가를 수행한 연구는 찾아보기 어려운 실정이다. 이에 본 연구에서는 모바일 검색의 주이용자 계층인 대학생들을 대상으로 이들의 모바일 검색 행태를 조사하고, 설문조사와 실험을 통하여 검색 포털들의 모바일 검색 서비스에 대한 평가를 수행하고자 한다. 즉, 실제 이용자들이 실제 질의를 이용하여 모바일 검색을 수행한 후, 검색 포털들의 모바일 검색 서비스를 컨텐츠, 인터페이스, 모바일 검색 기능, 접근성 등의 기준에 근거하여 평가하고, 모바일 검색 서비스에 대한 다양한 개선 방안을 제시하고자 한다.
즉, 실제 이용자들이 실제 질의를 이용하여 모바일 검색을 수행한 후, 검색 포털들의 모바일 검색 서비스를 컨텐츠, 인터페이스, 모바일 검색 기능, 접근성 등의 기준에 근거하여 평가하고, 모바일 검색 서비스에 대한 다양한 개선 방안을 제시하고자 한다. 이용자들이 모바일 검색 서비스 사용 시 경험했던 불편 사항, 개선이 필요한 사항 등에 대하여 심층적으로 조사하여, 모바일 검색 서비스에 대한 개선 방안을 제시하고자 한다.
이에 본 연구에서는 모바일 검색의 주이용자 계층인 대학생들을 대상으로 이들의 모바일 검색 행태를 조사하고, 설문조사와 실험을 통하여 검색 포털들의 모바일 검색 서비스에 대한 평가를 수행하고자 한다. 즉, 실제 이용자들이 실제 질의를 이용하여 모바일 검색을 수행한 후, 검색 포털들의 모바일 검색 서비스를 컨텐츠, 인터페이스, 모바일 검색 기능, 접근성 등의 기준에 근거하여 평가하고, 모바일 검색 서비스에 대한 다양한 개선 방안을 제시하고자 한다. 이용자들이 모바일 검색 서비스 사용 시 경험했던 불편 사항, 개선이 필요한 사항 등에 대하여 심층적으로 조사하여, 모바일 검색 서비스에 대한 개선 방안을 제시하고자 한다.
제안 방법
셋째, 정보 접근의 용이성을 의미하는 접근성 평가 기준의 예로는 초기 화면 로딩 시간, 검색 속도, 사이트맵 제공, 메뉴 배열에 있어서의 체계성, 내비게이션(항해)의 용이성, 애플리케이션 요구 유무 등이 제시되었다. 넷째, 연관검색어나 자동 완성 기능과 같은 일반 검색 지원 기능과 음성 검색, 음악 검색, QR 코드 검색과 같이 모바일 환경에 특화된 검색 기능도 평가 기준으로 제시되었다.
좀 더 구체적으로, 수강생들이 본인이 관심 있는 주제 분야의 질의 8개씩을 선정하였으며, 이 때, 대중적 질의와 전문적인 질의를 절반씩 선택하고, 또한 한글과 영어 질의를 절반씩 선택하도록 하였다. 또한 개별 질의 입력 후, 노출된 검색 결과 리스트에서 상위 10개의 문서에 대한 적합도를 평가하도록 하였다. 즉, 45명의 이용자가 선택한 총 360개의 질의에 대한 검색 결과 3,600개에 대해 2014년 11월 말부터 12월 초까지 2주 동안 평가를 수행하도록 하였다.
반면, 결과의 내용이 질의와 전혀 일치하지 않거나 관련이 없는 경우, 결과 문서에 질의가 등장하지만, 문서의 전반적인 내용이 질의와 무관한 경우 부적합으로 평가도록 하였다. 또한 결과에 질의와 관련된 내용이 매우 간략하게 처리된 경우, 결과 문서의 내용이 질의와 일부만 관련이 있는 경우, 질의가 검색 결과의 주요 주제가 아닌 경우, 적합이나 부적합으로 평가하기 애매한 경우 등은 보통으로 평가하도록 하였다. 적합도 평가의 예로서, “김연아 갈라쇼” 질의에 대해 김연아 갈라쇼 공연 동영상이 제공되는 경우는 적합, 김연아 갈라쇼가 등장 하지 않고 다른 선수들의 공연만 등장하는 동영상은 부적합, 김연아 선수가 아닌 다른 사람의 인터뷰 동영상 중 김연아 갈라쇼가 잠깐 언급되는 경우는 보통으로 평가된 사례가 제시되었다.
이 연구에서는 일차적으로 설문지를 통하여 이용자들의 모바일 검색 행태를 조사한 후, 실험 형식으로 이용자들이 선택한 검색 포털에서 질의별로 모바일 검색을 수행 후, 모바일 검색 서비스를 컨텐츠, 인터페이스, 접근성, 검색 지원 기능, 모바일 검색 기능 등의 평가 기준에 근거하여 평가하도록 하였다. 또한 모바일 검색에 대한 개선 방안을 자유 형식으로 기술하도록 하였다. 이용자들에게 제시된 평가 기준의 예는 다음과 같다.
즉, 결과의 전체적인 내용이 질의와 일치하거나 밀접한 관련이 있는 경우 적합으로 평가하도록 하였다. 반면, 결과의 내용이 질의와 전혀 일치하지 않거나 관련이 없는 경우, 결과 문서에 질의가 등장하지만, 문서의 전반적인 내용이 질의와 무관한 경우 부적합으로 평가도록 하였다. 또한 결과에 질의와 관련된 내용이 매우 간략하게 처리된 경우, 결과 문서의 내용이 질의와 일부만 관련이 있는 경우, 질의가 검색 결과의 주요 주제가 아닌 경우, 적합이나 부적합으로 평가하기 애매한 경우 등은 보통으로 평가하도록 하였다.
문헌정보학 분야에서 수행된 최근 연구로는 이공계 대학생과 대학원생들의 정보기기 이용 행태를 조사한 권나현 외의 연구(2013)를 들 수 있다. 서론에서 논의되었듯이, 이 연구에서는 일상 기록 관찰법, 실험, 설문지를 통하여, 검색, SNS, 메신저와 같은 일상 속의 정보기기 활용 행태를 조사하였다. 또한 오세나와 이지연의 연구에서는(2012) 설문조사를 이용하여 스마트폰을 통한 이용자들의 정보 탐색 행태를 탐색 주제와 고려 요인을 중심으로 살펴보았다.
한편, 이 연구에서 사용된 설문지는 크게 (1)모바일 검색 행태, (2)모바일 검색 평가 및 개선 방안 제시라는 두 가지 범주로 구성되어 있다. 설문지의 전반부는 오세나, 이지연(2012)의 연구를 일부 참고하였으며, 후반부는 최상기(2000) 등과 같은 웹 사이트 평가 관련 연구들을 참고하였다. 설문지의 구체적인 구성과 문항은 <표 1>과 같다.
이 연구에서는 일차적으로 설문지를 통하여 이용자들의 모바일 검색 행태를 조사한 후, 실험 형식으로 이용자들이 선택한 검색 포털에서 질의별로 모바일 검색을 수행 후, 모바일 검색 서비스를 컨텐츠, 인터페이스, 접근성, 검색 지원 기능, 모바일 검색 기능 등의 평가 기준에 근거하여 평가하도록 하였다. 또한 모바일 검색에 대한 개선 방안을 자유 형식으로 기술하도록 하였다.
(2009)은 웹 클러스터링 엔진인 CREDO(Conceptual Reorganization of Documents)에 기반한 핸드폰용 검색 시스템인 SmartCREDO와 PDA용 검색 시스템인 CREDINO를 구현하였다. 이들은 클러스터링 기법을 적용한 방식과 검색 결과의 순위를 리스트로 제공하는 방식의 검색 성능을 비교하는 실험을 수행하였다. August, Hansen과 Shriver(2002)는 검색 결과를 주제별로 분류하여 그룹화하는 클러스터 기법을 적용한 Hyponym이라는 시스템을 제안하였다.
즉, 실제 이용자들이 실제 질의를 이용하여 모바일 검색을 수행한 후, 검색 포털들의 모바일 검색 서비스를 컨텐츠, 인터페이스, 모바일 검색 기능, 접근성 등의 기준에 근거하여 평가하고, 모바일 검색 서비스에 대한 다양한 개선 방안을 제시하였다. 이용자들이 모바일 검색 서비스 사용 시 경험했던 불편 사항, 개선을 제안한 사항 등에 대하여 심층적으로 조사하여, 모바일 검색 서비스에 대한 개선 방안을 제시하였다.
이용자들이 선택한 검색 포털에 대한 평가 작업을 수행한 후, 모바일 검색에 대한 개선 방안을 자유 형식으로 기술하도록 하였다. 즉, 이용자들이 “모바일 검색 서비스의 개선이 필요한 항목에 대하여 개선 방안을 자유롭게 논하시오.
따라서 이 연구에서는 다양한 주제 분야의 질의를 대상으로 모바일 검색을 평가하기 위하여 이용자들의 실제 질의를 활용하기로 하였다. 좀 더 구체적으로, 수강생들이 본인이 관심 있는 주제 분야의 질의 8개씩을 선정하였으며, 이 때, 대중적 질의와 전문적인 질의를 절반씩 선택하고, 또한 한글과 영어 질의를 절반씩 선택하도록 하였다. 또한 개별 질의 입력 후, 노출된 검색 결과 리스트에서 상위 10개의 문서에 대한 적합도를 평가하도록 하였다.
또한 개별 질의 입력 후, 노출된 검색 결과 리스트에서 상위 10개의 문서에 대한 적합도를 평가하도록 하였다. 즉, 45명의 이용자가 선택한 총 360개의 질의에 대한 검색 결과 3,600개에 대해 2014년 11월 말부터 12월 초까지 2주 동안 평가를 수행하도록 하였다.
특히, 적합도 평가 기준 및 사례에 대한 상세한 교육이 다음과 같이 실시되었다. 즉, 결과의 전체적인 내용이 질의와 일치하거나 밀접한 관련이 있는 경우 적합으로 평가하도록 하였다. 반면, 결과의 내용이 질의와 전혀 일치하지 않거나 관련이 없는 경우, 결과 문서에 질의가 등장하지만, 문서의 전반적인 내용이 질의와 무관한 경우 부적합으로 평가도록 하였다.
본 연구에서는 모바일 검색의 주 이용자 계층인 대학생들을 대상으로 이들의 모바일 검색 행태를 조사하고, 설문조사와 실험을 통하여 검색 포털들의 모바일 검색 서비스에 대한 평가를 수행하였다. 즉, 실제 이용자들이 실제 질의를 이용하여 모바일 검색을 수행한 후, 검색 포털들의 모바일 검색 서비스를 컨텐츠, 인터페이스, 모바일 검색 기능, 접근성 등의 기준에 근거하여 평가하고, 모바일 검색 서비스에 대한 다양한 개선 방안을 제시하였다. 이용자들이 모바일 검색 서비스 사용 시 경험했던 불편 사항, 개선을 제안한 사항 등에 대하여 심층적으로 조사하여, 모바일 검색 서비스에 대한 개선 방안을 제시하였다.
본 연구의 수행 결과 후속 연구가 요구되는 사항들은 다음과 같다. 첫째, 이 연구는 모바일 검색 평가에 관한 탐색적 연구라는 측면에서 비교적 적은 수의 동질적인 이용자들을 대상으로 조사를 수행하였다. 향후 연구에서는 무작위 표본 추출을 통해 수집된 보다 많은 수의 다양한 이용자들을 대상으로 하는 평가 작업이 필요할 것으로 보인다.
특히, 이용자들이 선택한 질의에 대한 검색 결과를 적합도 기준에 따라 평가하도록 하였다. 검색 결과의 적합도는 적합, 보통, 부적합으로 평가되었으며, 그 이유는 정보 검색 분야에서 적합성 평가 시 복수의 등급 또는 정도를 허용하기 위하여 3점 척도를 사용하는 연구가 다수 수행되어 왔기 때문이다(김홍렬 2000; 노정순 2004).
한편, 이 연구에서 사용된 설문지는 크게 (1)모바일 검색 행태, (2)모바일 검색 평가 및 개선 방안 제시라는 두 가지 범주로 구성되어 있다. 설문지의 전반부는 오세나, 이지연(2012)의 연구를 일부 참고하였으며, 후반부는 최상기(2000) 등과 같은 웹 사이트 평가 관련 연구들을 참고하였다.
대상 데이터
본 연구는 이 분야의 탐색적 연구이며, 응답자가 검색 결과의 적합도를 평가하고 모바일 검색에 대한 개선 사항을 제안하는데 시간이 소요 된다는 점을 고려하여 45명의 대학생들을 대상으로 설문 조사와 실험을 수행하였다. 즉, 정보 검색 분야에서 거의 수행되지 않은 연구 주제를 다루는 탐색적 연구이며, 질적 연구를 병행하며, 검색 평가에 있어서 전문성이 요구된다는 점에서, 본 연구에서는 문헌정보학 전공 및 복수 전공 대학생 45명을 대상으로 자료를 수집하였다.
이 연구에서는 2014년도 2학기 서울 소재 여자 사립 대학교의 문헌정보학과에서 개설한 “온라인정보검색론”과 “정보자원관리” 수강생들을 대상으로 설문 조사와 실험을 수행하였다.
본 연구는 이 분야의 탐색적 연구이며, 응답자가 검색 결과의 적합도를 평가하고 모바일 검색에 대한 개선 사항을 제안하는데 시간이 소요 된다는 점을 고려하여 45명의 대학생들을 대상으로 설문 조사와 실험을 수행하였다. 즉, 정보 검색 분야에서 거의 수행되지 않은 연구 주제를 다루는 탐색적 연구이며, 질적 연구를 병행하며, 검색 평가에 있어서 전문성이 요구된다는 점에서, 본 연구에서는 문헌정보학 전공 및 복수 전공 대학생 45명을 대상으로 자료를 수집하였다. 통계학 문헌에서 이변량 상관관계와 같은 기본적인 추론 통계 수행에 필요한 표본의 크기는 30명으로 제시되고 있다(Minium, King and Bear 1993).
이론/모형
본 연구에 수집된 데이터에 대한 기술 통계 및 추론 통계 분석을 위하여 PASW SPSS version 23이 활용되었다.
성능/효과
또한 인터페이스의 심미성과 명확성, 포털에서 제공되는 풍부한 정보량 때문에 특정 포털을 선택한다는 이용자들도 존재하였다. 1순위 포털의 검색 결과가 만족스럽지 못할 때, 사용 하는 2순위 포털로는 구글이 다음보다 훨씬 많았으며, 구글을 선택한 이용자들의 경우, 네이버에 비해 해외 자료나 이미지 자료가 풍부하기 때문에 사용한다는 답변이 많았다.
<표 12>는 검색 수행 후, 이용자들이 포털의 모바일 검색에서 개선이 필요하다고 응답한 항목을 보여준다. 개선이 가장 시급한 분야는 컨텐츠로 나타났으며, 이어서 인터페이스, 접근성, 모바일 검색 기능, 일반 검색 기능 순으로 나타났다.
넷째, 네이버의 경우, 외국어 질의에 취약하다는 의견이 많았다. 즉, 외국어 질의와 한글 질의 간에 검색 결과의 양이나 질, 최신성에 있어서 차이가 큰 것으로 나타났다.
둘째, 의학 분야 질의와 같은 전문적인 질의에 대한 검색 결과 상위에 블로그, 카페, 지식iN, 위키백과와 같이 신뢰도가 낮은 컬렉션의 문서가 노출되는 것 또한 개선이 필요한 것으로 지적되었다. 셋째, 쇼핑, 패션, 음식, 라이프 스타일 관련 질의 입력 시, 검색 결과에서 광고의 비중이 높다는 점 또한 불편 사항으로 지적되었다.
즉, 표본 추출 및 자료 수집 과정에 대한 보완이 필요할 것으로 보인다. 둘째, 이용자들의 실제 정보 요구와 정보 행태를 반영하기 위하여, 이용자들이 평소에 자주 사용하며 관심 있는 검색 포털을 평가 대상으로 선택하게 한 결과, 평가 대상이 특정 포털에 편중되는 현상이 발생하였다. 후속 연구에서는 포털별로 균등한 인원을 배분한 후 실험을 수행하여 포털들의 모바일 검색 서비스를 비교하는 작업이 필요할 것으로 보인다.
첫째, 컨텐츠 평가 기준의 예로는 적합도, 신뢰도, 최신성과 같은 결과의 품질, 결과 중 유해 정보의 비중, 광고의 비중, 검색 결과중 노출되는 컬렉션의 적절성 등이 제시되었다. 둘째, 인터페이스 평가 기준의 예로는 인터페이스의 단순함, 일관성, 명확성, 사용의 용이성, 글자 크기나 글자체, 배경 색과 글자 색의 선택, 배경 색과 글자 색의 조화, 결과의 길이(화면 스크롤 수), 검색 결과의 수, 노출되는 컬렉션의 수, 노출되는 컬렉션의 순서 등이 제시되었다. 셋째, 정보 접근의 용이성을 의미하는 접근성 평가 기준의 예로는 초기 화면 로딩 시간, 검색 속도, 사이트맵 제공, 메뉴 배열에 있어서의 체계성, 내비게이션(항해)의 용이성, 애플리케이션 요구 유무 등이 제시되었다.
7로 보통 이상이지만, 이 결과가 상위 10개 문서에 대한 정확률임을 고려할 때, 개선의 필요성이 있다고 할 수 있다. 또한 검색 결과가 존재하지 않거나, 접속 시 에러가 발생하거나, 문서나 동영상이 삭제된 경우와 같이 문제가 있는 오류 문서(결과)가 전체 결과의 1.9%(n=67개)를 차지하고 있었다.
모바일 검색 시 이용자들이 사용하는 포털 순위에 있어서는 특정 포털에 대한 집중 현상이 강하였으며, 모바일 검색에서 특정 포털을 선택하는 주된 이유는 습관, 충성도로 나타났다. 또한 모바일 검색 시 이용자들이 질의 입력 후 출력된 검색 결과에서 클릭하는 문서 수와 수행하는 스크롤 수 모두 적은 것으로 나타났다.
접근성에 있어서는 속도의 개선이 요구되며, 어플리케이션 다운로드 요구를 가급적 최소화하는 것이 필요할 것으로 보인다. 마지막으로, 모바일 환경에서의 상세 검색 기능 지원이나 모바일 환경에 특화된 검색 기능의(예, 음성 검색, 음악 검색) 인식 정확성 향상 등이 요구되었다.
연구 결과, 포털 검색 시 스마트 폰을 주로 사용하는 이용자가 PC를 주로 사용하는 이용자수의 약 2배 반에 달하였으며, 이용자들이 스마트 폰과 PC에서 검색하는 주제는 명백한 차이를 드러냈다. 모바일 검색 시 이용자들이 사용하는 포털 순위에 있어서는 특정 포털에 대한 집중 현상이 강하였으며, 모바일 검색에서 특정 포털을 선택하는 주된 이유는 습관, 충성도로 나타났다. 또한 모바일 검색 시 이용자들이 질의 입력 후 출력된 검색 결과에서 클릭하는 문서 수와 수행하는 스크롤 수 모두 적은 것으로 나타났다.
<표 5>는 모바일 검색 시와 PC 검색 시에 사용하는 검색 포털의 순위를 각각 보여 준다. 모바일과 PC 모두 이용자들이 가장 많이 사용 하는 포털은 네이버로 나타났으며, 이어서 구글, 다음 순으로 나타나 네이버에 대한 쏠림 현상이 강함을 알 수 있다.
둘째, 의학 분야 질의와 같은 전문적인 질의에 대한 검색 결과 상위에 블로그, 카페, 지식iN, 위키백과와 같이 신뢰도가 낮은 컬렉션의 문서가 노출되는 것 또한 개선이 필요한 것으로 지적되었다. 셋째, 쇼핑, 패션, 음식, 라이프 스타일 관련 질의 입력 시, 검색 결과에서 광고의 비중이 높다는 점 또한 불편 사항으로 지적되었다.
둘째, 인터페이스 평가 기준의 예로는 인터페이스의 단순함, 일관성, 명확성, 사용의 용이성, 글자 크기나 글자체, 배경 색과 글자 색의 선택, 배경 색과 글자 색의 조화, 결과의 길이(화면 스크롤 수), 검색 결과의 수, 노출되는 컬렉션의 수, 노출되는 컬렉션의 순서 등이 제시되었다. 셋째, 정보 접근의 용이성을 의미하는 접근성 평가 기준의 예로는 초기 화면 로딩 시간, 검색 속도, 사이트맵 제공, 메뉴 배열에 있어서의 체계성, 내비게이션(항해)의 용이성, 애플리케이션 요구 유무 등이 제시되었다. 넷째, 연관검색어나 자동 완성 기능과 같은 일반 검색 지원 기능과 음성 검색, 음악 검색, QR 코드 검색과 같이 모바일 환경에 특화된 검색 기능도 평가 기준으로 제시되었다.
에 따르면, 대중적인 질의의 평균 정확률은 0.74, 전문적인 질의의 평균 정확률은 0.67이었으며, 대중 질의와 전문 질의의 적합도 차이를 분석하기 위하여 T-test를 적용한 결과, 이 차이는 통계적으로 유의미한 것으로 나타났다(t(3531)=4.396, p<.001).
에 따르면, 한글 질의의 평균 정확률은 0.72이고, 영어 질의의 평균 정확률은 0.69였으며, 한글 질의와 영어 질의의 적합도 차이를 분석하기 위하여 T-test를 적용한 결과, 이 차이는 통계적으로 유의미한 것으로 나타났다 (t(3531)=2.527, p<.05).
연구 결과, 포털 검색 시 스마트 폰을 주로 사용하는 이용자가 PC를 주로 사용하는 이용자수의 약 2배 반에 달하였으며, 이용자들이 스마트 폰과 PC에서 검색하는 주제는 명백한 차이를 드러냈다. 모바일 검색 시 이용자들이 사용하는 포털 순위에 있어서는 특정 포털에 대한 집중 현상이 강하였으며, 모바일 검색에서 특정 포털을 선택하는 주된 이유는 습관, 충성도로 나타났다.
즉, 외국어 질의와 한글 질의 간에 검색 결과의 양이나 질, 최신성에 있어서 차이가 큰 것으로 나타났다. 영어 인명, 영화명, 기관명 등을 영어와 한글로 동시에 검색 시 결과의 양 및 정확성에 있어서 큰 차이를 보이고 있었다. 예를 들어, 한글 질의 “인터스텔라”를 입력한 경우와 영어 질의 “Interstellar”를 입력한 경우, 제공되는 검색 결과의 양이나 결과의 적합도에 있어서 차이가 있는 것으로 나타났다.
이용자들이 스마트 폰과 PC에서 검색하는 주제는 명백한 차이를 보였는데, 모바일 환경에서 가장 많이 검색하는 주제는 생활정보였으며, 이어서 엔터테인먼트, 쇼핑, 뉴스/미디어, 학업/연구 순으로 나타났다. 반면, PC에서 가장 많이 검색하는 주제는 학업/연구였으며, 이어서 쇼핑, 지역/여행, 생활정보, 뉴스/미디어 순으로 나타났다.
<표 11>은 이용자들이 각각 8개씩의 실제 질의를 이용하여 모바일 검색을 수행 후, 포털의 모바일 검색의 컨텐츠, 인터페이스, 검색 지원 기능, 모바일 검색 기능, 접근성에 대한 만족도를 5점 척도로 평가한 내용이다. 일반 검색 기능(자동 완성 기능, 연관 검색어 기능)에 대한 만족도가 상대적으로 가장 높았으며, 모바일 검색 기능, 인터페이스, 접근성에 대한 만족도도 보통 이상인 것으로 나타났다. 컨텐츠에 있어서는 최신성에 대한 만족도가 가장 높았으며, 적합도와 신뢰도에 대한 만족도는 각각 보통과 보통 이하로 나타났다.
넷째, 네이버의 경우, 외국어 질의에 취약하다는 의견이 많았다. 즉, 외국어 질의와 한글 질의 간에 검색 결과의 양이나 질, 최신성에 있어서 차이가 큰 것으로 나타났다. 영어 인명, 영화명, 기관명 등을 영어와 한글로 동시에 검색 시 결과의 양 및 정확성에 있어서 큰 차이를 보이고 있었다.
<표 10>은 이용자들이 선택한 8개 질의의 검색 결과 중 상위 10개 결과의 정확률에 대한 기술 통계이다. 즉, 총 3,600개 검색 결과의 정확률은 0.7로 보통 이상이지만, 이 결과가 상위 10개 문서에 대한 정확률임을 고려할 때, 개선의 필요성이 있다고 할 수 있다. 또한 검색 결과가 존재하지 않거나, 접속 시 에러가 발생하거나, 문서나 동영상이 삭제된 경우와 같이 문제가 있는 오류 문서(결과)가 전체 결과의 1.
<표 13>에 따르면, 모바일 검색에서 개선이 가장 시급한 분야는 컨텐츠이며, 이어서 인터페이스, 접근성, 모바일 검색 기능, 일반 검색 기능 순으로 나타났다. 첫째, 대다수 응답자가 검색 결과의 적합성 부족을 컨텐츠의 가장 우선적인 개선 사항으로 지적하였다. 즉, 제목이나 본문에 질의가 포함되어 있지만 부적합한 검색 결과가 노출되는 경우가 적지 않으며, 전문적인 질의의 경우 대중적인 질의보다 검색 결과의 적합도가 낮다는 의견이 많았다.
이용자들에게 제시된 평가 기준의 예는 다음과 같다. 첫째, 컨텐츠 평가 기준의 예로는 적합도, 신뢰도, 최신성과 같은 결과의 품질, 결과 중 유해 정보의 비중, 광고의 비중, 검색 결과중 노출되는 컬렉션의 적절성 등이 제시되었다. 둘째, 인터페이스 평가 기준의 예로는 인터페이스의 단순함, 일관성, 명확성, 사용의 용이성, 글자 크기나 글자체, 배경 색과 글자 색의 선택, 배경 색과 글자 색의 조화, 결과의 길이(화면 스크롤 수), 검색 결과의 수, 노출되는 컬렉션의 수, 노출되는 컬렉션의 순서 등이 제시되었다.
일반 검색 기능(자동 완성 기능, 연관 검색어 기능)에 대한 만족도가 상대적으로 가장 높았으며, 모바일 검색 기능, 인터페이스, 접근성에 대한 만족도도 보통 이상인 것으로 나타났다. 컨텐츠에 있어서는 최신성에 대한 만족도가 가장 높았으며, 적합도와 신뢰도에 대한 만족도는 각각 보통과 보통 이하로 나타났다.
<표 2>는 이용자들이 포털 검색 시 더 많이 사용하는 매체의 빈도 및 분포를 보여 준다. 포털 검색 시 스마트 폰을 주로 사용하는 이용자가 PC를 주로 사용하는 이용자의 약 2배 반에 달하는 것으로 나타났다.
한편, 모바일 검색에서 개선이 가장 시급한 분야는 컨텐츠로 나타났으며, 이어서 인터페이스, 접근성, 모바일 검색 기능, 일반 검색 기능 순으로 나타났다. 특히 컨텐츠의 적합도와 신뢰도의 개선이 요구되며, 광고의 비중을 축소하는 것 또한 필요할 것으로 보인다.
특히 컨텐츠의 적합도와 신뢰도의 개선이 요구되며, 광고의 비중을 축소하는 것 또한 필요할 것으로 보인다. 한편, 이 연구에서는 대중적인 질의의 정확률이 전문적인 질의의 정확률보다 높았고, 한글 질의의 정확률이 영어 질의보다 높았으며, 이러한 차이는 모두 통계적으로 유의한 것으로 나타났다. 따라서 네이버를 비롯한 검색 포털들은 전문적인 질의와 영어 질의에 대한 검색 결과의 품질을 강화할 필요가 있다.
후속연구
셋째, 웹 검색 분야에서 사용되고 있는 다양한 연구 방법들 중 로그 분석은 이용자와 검색 시스템 사이의 모든 상호 작용을 기록하고, 이용자의 실제 검색 행태를 사실적으로 반영한다. 따라서 로그 분석을 통하여 이용자들의 전반적인 모바일 검색 행태를 분석하고, 이를 모바일 검색 시스템 구현 및 개선에 반영하는 것이 필요할 것이다. 또한 로그 분석을 통하여 PC 이용자와 모바일 이용자의 검색 행태를 심층적인 비교 작업이 필요할 것으로 보인다.
따라서 로그 분석을 통하여 이용자들의 전반적인 모바일 검색 행태를 분석하고, 이를 모바일 검색 시스템 구현 및 개선에 반영하는 것이 필요할 것이다. 또한 로그 분석을 통하여 PC 이용자와 모바일 이용자의 검색 행태를 심층적인 비교 작업이 필요할 것으로 보인다. 마지막으로, 후속 연구에서는 본 연구에서 제시한 방법론에 대한 검증 및 보완 작업이 요구된다.
이 연구는 모바일 검색 평가를 위한 방법론을 제시함으로써 웹 검색 분야에 학문적으로 기여할 수 있을 것으로 기대된다. 또한 본 연구의 결과는 검색 포털들의 모바일 검색에 대한 다양한 개선 방안을 제시함으로써, 향후 포털들의 모바일 검색 서비스의 개선에 활용될 수 있을 것으로 기대된다. 즉 본 연구의 결과는 포털 업체들의 효과적인 검색 기능 및 서비스 개발에 기초 자료로서 활용될 수 있을 것으로 기대된다.
향후 연구에서는 무작위 표본 추출을 통해 수집된 보다 많은 수의 다양한 이용자들을 대상으로 하는 평가 작업이 필요할 것으로 보인다. 또한 이 연구는 문헌정보학과 전공생들을 대상으로 조사를 수행하였으므로, 향후 연구에서는 문헌정보학과 전공생들과 타 전공생들 간의 비교 작업이 필요할 것으로 보인다. 즉, 표본 추출 및 자료 수집 과정에 대한 보완이 필요할 것으로 보인다.
마지막으로, 음악 검색, 일본어 검색, 한자 검색과 같은 모바일 검색 수행 시 인식의 오류가 발생하는 문제도 개선이 필요한 것으로 나타났다.
또한 로그 분석을 통하여 PC 이용자와 모바일 이용자의 검색 행태를 심층적인 비교 작업이 필요할 것으로 보인다. 마지막으로, 후속 연구에서는 본 연구에서 제시한 방법론에 대한 검증 및 보완 작업이 요구된다.
이 연구는 모바일 검색 평가를 위한 방법론을 제시함으로써 웹 검색 분야에 학문적으로 기여할 수 있을 것으로 기대된다. 또한 본 연구의 결과는 검색 포털들의 모바일 검색에 대한 다양한 개선 방안을 제시함으로써, 향후 포털들의 모바일 검색 서비스의 개선에 활용될 수 있을 것으로 기대된다.
따라서 질의의 특징이나 성격을 활용하여 컬렉션 순서를 향상시킬 필요가 있을 것으로 보인다. 접근성에 있어서는 속도의 개선이 요구되며, 어플리케이션 다운로드 요구를 가급적 최소화하는 것이 필요할 것으로 보인다. 마지막으로, 모바일 환경에서의 상세 검색 기능 지원이나 모바일 환경에 특화된 검색 기능의(예, 음성 검색, 음악 검색) 인식 정확성 향상 등이 요구되었다.
또한 본 연구의 결과는 검색 포털들의 모바일 검색에 대한 다양한 개선 방안을 제시함으로써, 향후 포털들의 모바일 검색 서비스의 개선에 활용될 수 있을 것으로 기대된다. 즉 본 연구의 결과는 포털 업체들의 효과적인 검색 기능 및 서비스 개발에 기초 자료로서 활용될 수 있을 것으로 기대된다.
한편, 모바일 검색에서 개선이 가장 시급한 분야는 컨텐츠로 나타났으며, 이어서 인터페이스, 접근성, 모바일 검색 기능, 일반 검색 기능 순으로 나타났다. 특히 컨텐츠의 적합도와 신뢰도의 개선이 요구되며, 광고의 비중을 축소하는 것 또한 필요할 것으로 보인다. 한편, 이 연구에서는 대중적인 질의의 정확률이 전문적인 질의의 정확률보다 높았고, 한글 질의의 정확률이 영어 질의보다 높았으며, 이러한 차이는 모두 통계적으로 유의한 것으로 나타났다.
향후 모바일 기기를 활용한 검색은 꾸준히 증가할 것으로 예측되므로, 모바일 검색에 관한 지속적인 연구가 요청된다. 본 연구의 수행 결과 후속 연구가 요구되는 사항들은 다음과 같다.
첫째, 이 연구는 모바일 검색 평가에 관한 탐색적 연구라는 측면에서 비교적 적은 수의 동질적인 이용자들을 대상으로 조사를 수행하였다. 향후 연구에서는 무작위 표본 추출을 통해 수집된 보다 많은 수의 다양한 이용자들을 대상으로 하는 평가 작업이 필요할 것으로 보인다. 또한 이 연구는 문헌정보학과 전공생들을 대상으로 조사를 수행하였으므로, 향후 연구에서는 문헌정보학과 전공생들과 타 전공생들 간의 비교 작업이 필요할 것으로 보인다.
둘째, 이용자들의 실제 정보 요구와 정보 행태를 반영하기 위하여, 이용자들이 평소에 자주 사용하며 관심 있는 검색 포털을 평가 대상으로 선택하게 한 결과, 평가 대상이 특정 포털에 편중되는 현상이 발생하였다. 후속 연구에서는 포털별로 균등한 인원을 배분한 후 실험을 수행하여 포털들의 모바일 검색 서비스를 비교하는 작업이 필요할 것으로 보인다. 셋째, 웹 검색 분야에서 사용되고 있는 다양한 연구 방법들 중 로그 분석은 이용자와 검색 시스템 사이의 모든 상호 작용을 기록하고, 이용자의 실제 검색 행태를 사실적으로 반영한다.
질의응답
핵심어
질문
논문에서 추출한 답변
모바일 검색 관련 국내외 선행 연구들은 어디에 집중되어 있는가?
한편 모바일 검색은 최근에 등장한 분야이므로, 모바일 검색 서비스에 대한 체계적인 평가를 수행한 연구는 드문 실정이다. 모바일 검색 관련 국내외 선행 연구들의 경우, 모바일 검색 기법이나 시스템을 제안하거나, 시스템의 검색 성능을 평가하기 위한 실험 연구에 집중되어 왔다. 문헌정보학 분야에서 최근에 수행된 연구들 중 권나현 등의 연구에서는(2013) 이공계 대학생과 대학원생들의 일상 속의 정보 기기 이용 행태를 조사하였는데, 이들의 연구는 검색에 국한하지 않고, SNS, 메신저와 같은 정보기기 활용 행태를 일상 기록 관찰법, 실험, 설문지법으로 조사하였다.
인터페이스에 대한 평가를 살펴보았을 때 어떤 것을 알 수 있는가?
인터페이스에 대한 평가를 살펴보면, 전반적으로 인터페이스의 심미성, 명확성, 직관성 등에 대한 만족도는 높은 것으로 나타났으나, 검색 결과의 컬렉션 순위에 대해 개선이 필요하다는 의견이 많았다. 보다 구체적으로 부적합한 컬렉션 순위를 문제점으로 지적한 응답자가 많았는데, 이는 위에서 언급된 컨텐츠의 신뢰도와도 관련이 있다고 할 수 있다.
모바일 검색에 대한 후속 연구가 요구되는 사항은 무엇인가?
본 연구의 수행 결과 후속 연구가 요구되는 사항들은 다음과 같다. 첫째, 이 연구는 모바일 검색 평가에 관한 탐색적 연구라는 측면에서 비교적 적은 수의 동질적인 이용자들을 대상으로 조사를 수행하였다. 향후 연구에서는 무작위 표본 추출을 통해 수집된 보다 많은 수의 다양한 이용자들을 대상으로 하는 평가 작업이 필요할 것으로 보인다. 또한 이연구는 문헌정보학과 전공생들을 대상으로 조사를 수행하였으므로, 향후 연구에서는 문헌정보학과 전공생들과 타 전공생들 간의 비교 작업이 필요할 것으로 보인다. 즉, 표본 추출 및 자료 수집 과정에 대한 보완이 필요할 것으로 보인다. 둘째, 이용자들의 실제 정보 요구와 정보 행태를 반영하기 위하여, 이용자들이 평소에 자주 사용하며 관심 있는 검색 포털을 평가 대상으로 선택하게 한 결과, 평가 대상이 특정 포털에 편중되는 현상이 발생하였다. 후속 연구에서는 포털별로 균등한 인원을 배분한 후 실험을 수행하여 포털들의 모바일 검색 서비스를 비교하는 작업이 필요할 것으로 보인다. 셋째, 웹 검색 분야 에서 사용되고 있는 다양한 연구 방법들 중 로그 분석은 이용자와 검색 시스템 사이의 모든 상호 작용을 기록하고, 이용자의 실제 검색 행태를 사실적으로 반영한다. 따라서 로그 분석을 통하여 이용자들의 전반적인 모바일 검색 행태를 분석하고, 이를 모바일 검색 시스템 구현 및개선에 반영하는 것이 필요할 것이다. 또한 로그 분석을 통하여 PC 이용자와 모바일 이용자의 검색 행태를 심층적인 비교 작업이 필요할 것으로 보인다. 마지막으로, 후속 연구에서는본 연구에서 제시한 방법론에 대한 검증 및 보완 작업이 요구된다.
참고문헌 (28)
권나현 외. 2013. 넷세대 이공계 학부생과 대학원생들의 학업 및 일상생활에서의 정보이용과 정보 기기 활용 비교분석. 정보관리학회지, 30(2): 269-295.(Kwon, Nahyun et al. 2013. "Comparative Analyses of the Uses of Information and Information Technologies in the Everyday Life of Undergraduate and Graduate Students Majoring Science and Engineering." Journal of the Korean Society for Information Management, 30(2): 269-295.)
권형오, 이태훈, 홍광석. 2009. 모바일 환경에서의 위치기반 의미 정보 검색 시스템. 한국인터넷정 보학회 학술발표대회 논문집, 19: 331-336.(Kwon, Hyeong-Oh, Lee, Tae-Hoon and Hong, Kwang-Seok. 2009. "Location Based Semantic Information Retrieval System in a Mobile Environment." In Proceedings of the Korean Society for Internet Information, 19: 331-336.)
김재훈, 김형철. 2009. 모바일 기기를 위한 정보검색 시스템. 한국마린엔지니어링학회지, 33(4): 569-577.(Kim, Jae-Hoon and Kim, Hyung-Chul. 2009. "Information Retrieval System for Mobile Devices." Journal of the Korean Society for Marine Engineering, 33(4): 569-577.)
김홍렬. 2000. 적합성 평가기준 변화에 관한 실험 연구. 한국도서관?정보학회지, 31(4): 139-164.(Kim, Hong-Ryul. 2000. "A Study on the Variation of Criteria for Relevance Judgement of Retrieved Documents." Journal of Korean Library and Information Science Society, 31(4): 139-164.)
노정순. 2004. Invisible Web 탐색도구의 성능 비교 및 분석. 정보관리학회지, 21(3): 203-225.(Ro, Jung-Soon. 2004. "The Effectiveness of the Invisible Web Search Tools." Journal of the Korean Society for Information Management, 21(3): 203-225.)
노혜은, 김찬일, 김현수. 2014. 모바일 지도서비스 최적 지도 검색 결과 연구. 한국HCI학회 학술대회, 2014(12): 175-178.(Noh, Hyeeun, Kim, Chanil and Kim, Hyunsu. 2014. "A Study of the Optimal Map View Result for Mobile." In Proceedings of the Korea HCI Congress, 2014(12): 175-178.)
맹성현 외. 1999. 정보 검색 시스템 평가를 위한 균형 테스트 컬렉션 구축. 정보관리학회지, 16(2): 135-148.(Myaeng, Sung-Hyon et al. 1999. "Construction of a Balanced Test Collection for Evaluation of Information Retrieval Systems." Journal of the Korean Society for Information Management, 16(2): 135-148.)
박세리, 김미진. 2009. 모바일 단문전송서비스(SMS)를 활용한 위치정보검색시스템(LBIoS). 한국콘텐츠학회 종합학술대회 논문집, 7(1): 99-104.(Pack, Se-lee and Kim, Mijin. 2009. "A Study on the SMS(Short Message Service)-Based Information Retrieval System for Mobile Phone." In Proceedings of the Korea Contents Society, 7(1): 99-104.)
박소연. 2011. 검색 포털들의 모바일 검색 기능 분석. 정보관리학회지, 29(1): 175-190.(Park, Soyeon. 2011. "Analysis of Mobile Search Functions of Korean Search Portals." Journal of the Korean Society for Information Management, 29(1): 175-190.)
박지은, 노혜은, 김찬일. 2014. 위치정보 검색 결과 화면의 최적 유형에 관한 연구: 모바일 지도서 비스 검색 결과 적용사례를 중심으로. 한국HCI학회 학술대회, 2014(2): 323-327.(Park, Jieun, Noh, Hyeeun and Kim, Chanil. 2014. "A Study on Ideal Representation Types of Location Search Results Case of Revising a Mobile Map Service Application." In Proceedings of the Korea HCI Congress, 2014(2): 323-327.)
복경수 외. 2014. 모바일 환경에서 시간 속성을 고려한 효율적인 위치 기반 소셜 검색. 정보과학회 컴퓨팅의 실제 논문지, 20(4): 243-247.(Bok, Koung Soo et al. 2014. "Efficient Location Based Social Search Considering Time Property in Mobile Environments." Journal of KIISE Transactions on Computing Practices, 20(4): 243-247.)
서호, 조성배. 2014. 모바일 라이프로그 네트워크에서의 의미관계기반 검색 방법. 정보과학회논 문지: 소프트웨어 및 응용, 41(1): 80-87.(Xu, Hu and Cho, Sung-Bae. 2014. "A Semantic Relation-Based Retrieval Method in Mobile Life-Log Network." Journal of KISS: Software and Applications, 41(1): 80-87.)
송효진, 이태휘, 김형주. 2012. 모바일 통합 검색에서 온톨로지를 활용한 컬렉션 순서의 정확도 향상. 정보과학회 컴퓨팅의 실제 논문지, 18(3): 187-196.(Song, Hyojin, Lee, Taewhi and Kim, Hyoung-Joo. 2012. "Enhancing Accuracy of Collection Order Using Ontology in Mobile Aggregated Search." Journal of KIISE Transactions on Computing Practices, 18(3): 187-196.)
안민제 외. 2013. 모바일 소셜 네트워크에서 인기도와 사용자 성향을 고려한 소셜 검색 기법. 정보과학회논문지: 데이타베이스, 40(6): 397-405.(Ahn, Minje et al. 2013. "A Social Search Scheme Considering Popularity and User Preferences in Mobile Social Networks." Journal of KISS: Database, 40(6): 397-405.)
안병태, 박경모. 2014. 모바일 환경의 이미지 시맨틱 검색 관리 시스템. 한국정보기술학회논문지, 12(7): 111-121.(Ahn, Byeong-Tae and Park, Kyeongmo. 2014. "Image Semantic Search Management System of Mobile Environment." Journal of KIIT, 12(7): 111-121.)
이광조 외. 2007. 모바일 단말기를 위한 위치기반 검색어 추천 시스템. 한국정보과학회 학술발표 논문집, 34(2(D)): 427-430.(Lee, KwangJo et al. 2007. "Location-based Keyword Recommendation System for Mobile Device." In Proceedings of the Korea Computer Congress, 34(2(D)): 427-430.)
이해성, 권준희. 2012. 사용자 선호도 예측 기법과 계층적 클러스터링 기법을 활용한 효과적인 상황 인식 모바일 정보 검색. 한국정보기술학회논문지, 10(5): 177-187.(Lee, Hae-Sung and Kwon, Joon-Hee. 2012. "Effective Context-Awareness Mobile Information Retrieval using User's Preference Prediction and Hierarchical Clustering." Journal of KIIT, 10(5): 177-187.)
오세나, 이지연. 2012. 스마트폰 이용자들의 정보탐색행태에 관한 연구. 정보관리학회지, 29(1): 191-209.(Oh, Sena and Lee, Jee-Yeon. 2012. "A Study on Information Searching Behavior of Smart Phone Users." Journal of the Korean Society for Information Management, 29(1): 191-209.)
최상기. 2000. 대학도서관 웹사이트 설계에 관한 연구. 정보관리학회지, 17(4): 137-155.(Choi, Sang-Ki. 2000. "A Study on the Design of Academic Library Web Site." Journal of the Korean Society for Information Management, 17(4): 137-155.)
Broussard, R., Zhou, Y. and Lease, M. 2010. "University of Texas Mobile Library Search." In Proceedings of the American Society for Information Science and Technology, 47(1): 1-2.
Carpineto, C. et al. 2009. "Mobile Information Retrieval with Search Results Clustering: Prototypes and Evaluations." Journal of the American Society for Information Science and Technology, 60(5): 877-895.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.