[논문]온라인 시험 및 평가 시스템 설계 방안

최경수; 이길흥

doi:10.17662/ksdim.2017.13.1.013

온라인 시험 및 평가 시스템 설계 방안
A Design Scheme of Online Test and Evaluation System 원문보기

디지털산업정보학회논문지 = Journal of the Korea Society of Digital Industry and Information Management, v.13 no.1, 2017년, pp.13 - 21

최경수 (서울과학기술대학교 컴퓨터공학과) , 이길흥 (서울과학기술대학교 컴퓨터공학과)

Abstract ▼ AI-Helper

This paper describes a design scheme of a system that tests or polls from the students at online class. By online test, the teacher can test the pre-knowledge level of the students and know how much students understand the lecture of the class. As the number of test increases, the burden of the preparation of setting question, evaluation of the test, and management of the test results is increased. In this environments, an online test management system make it easy to test and evaluate, and thus it would be a good tool for maintaining and managing the total procedure of the test or poll of the students. For evaluating the design of the system, we made a test system prototype and performed evaluations of the online test system. The online test and evaluation system provides a good tool for testing and evaluation of student's knowledge at the class with easy and fast way.

주제어

AI 본문요약
AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

문제 정의

기본적으로 평가에 기반한 학습이 이루어져야 학습의 효율성을 높일 수 있다. 본 논문에서는 온라인 평가를 쉽고 편하게 관리할 수 있는 시스템을 설계하고 구현하였다. 온라인 평가에서 요구되는 사항과 시나리오를 정리하였고, 이를 구현하기 위한 모델을 설계하고, 이를 반영한 실제 시스템을 구현하였다.
더 나아가 온라인으로 정식평가를 도입할 경우 학생들은 시간과 장소에 구애받지 않고 스마트폰 기술이 내장된 기기를 통해 시험을 편하게 치를 수 있다[1]. 앞서 말한 오프라인평가의 장점인 공정성과 보안성, 그리고 시공간 제약이 적다는 편리성을 동시에 획득할 수 있는 시스템을 연구한다.
또한 이를 실제 교육현장에 적용하기 위하여 웹기반 응용프로그램인 온라인 학습 커뮤니티를 구축하고 탐구기반 개념학습의 수업절차를 수행할 수 있도록 탐구활동 메뉴, 구성원 간의 커뮤니케이션 지원 기능, 정보공유 기능, 수업 및 탐구활동 스케쥴링 기능, 멘토링 기능, 온라인 활동 평가 기능 등이 포함되었다. 이러한 기능을 통해 도출된 탐구활동 지원도구의 유용성을 검증하고 탐구활동 지원도구가 공학교육에서의 탐구기반 개념학습에 미치는 영향을 실험연구를 통하여 조사하고자 하였다.

제안 방법

설계를 바탕으로 .NET 기반 웹서버에서 동작하는 투표 및 설문 시스템을 개발하였다. 우선, 문제 만들기를 선택하여 총 문제와 시험모드를 선택 할 수 있게 된다.
이런 폼을 제공을 통해 감독관이 편리하게 문제를 입력 할 수 있다. 감독관은 원하는 문제 스타일과 개수가 등이 때에 따라서 변경할 수 있도록 해당 폼을 동적으로 적용하게 하였다.
논문 [7]에서는 교사의 ICT 활용 능력에 관한 국내외의 평가 도구를 비교 분석하고 각 도구의 장점을 바탕으로 교사의 ICT 활용 능력의 자기 평가 도구를 개발하였다. 개발된 웹 기반 교사의 ICT 활용능력 자기평가도구를 교사를 대상으로 적용하여 성별, 직위별, 지역별, 교육경력별 ICT 활용능력 수준 등을 조사 분석하는데 활용되었다. 관련 연구뿐만 아니라 사용자컴퓨터, 평가자컴퓨터, 관리자컴퓨터, 데이터베이스부의 모듈로 구성되는 온라인 평가 시스템 및 온라인 평가 방법에 대한 특허도 제출되었다[8-9].
온라인 학습 컨텐츠의 매체적 특성이 온라인 교육의 학습 효과에 의미있는 영향을 주고 있음이 알려져 왔다[6]. 논문 [1]에서 웹을 기반으로 하는 온라인 수업의 보편화가 이루어지고 있는 상황임에도 불구하고 시험은 주로 강의실에서 이루어지고 있다는데 주목하고 시험도 온라인으로 자연스럽게 치러질 수 있다는 인식하에 강의실 수업 후, 온라인과 강의실 시험의 차이를 비교하여 온라인 시험에 대한 적절성의 근거를 찾으려 하였다. 논문 [7]에서는 교사의 ICT 활용 능력에 관한 국내외의 평가 도구를 비교 분석하고 각 도구의 장점을 바탕으로 교사의 ICT 활용 능력의 자기 평가 도구를 개발하였다.
평가는 교육에서 매우 중요한 요소이다. 수강자 개개인의 역량을 평가하고, 성취도를 평가하고, 클래스의 전체 교육의 효과를 판정한다. 이러한 평가의 피드백을 통해, 문제점을 찾고 해결하며, 수업에서의 교육 방법의 질적 개선을 도모할 수 있다.
논문 [10]에서는 온라인 평가 문항관리 시스템 및 방법에 관한 것을 제안하였는데, 제안 시스템은 학습자 정보 데이터베이스, 영역별, 난이도별로 분류된 문항을 저장하는 문제 은행 데이터베이스로 구성하였다. 시스템을 통해, 보기 선택순서, 클릭회수, 반응시간을 학습자의 평가결과에 반영하여 효율적으로 학습자의 학습수준과 학습능력, 성향을 평가하고 진단하였다. 논문 [11]에서는 평가에서 각 문항에 소요된 시간, 답안 변경 내역, 각 문항의 방문 횟수 등과 같은 심화된 정보를 얻기 위해, 응시자가 문항을 자유롭게 이동하면서 시험을 치를 수 있는 시스템을 개발하였다.
기존의 PC 프로그램은 다운로드를 통해 설치를 해야 하고 운영체제마다 다르게 만들어야 하는 수고가 든다. 오늘날 인터넷 환경이 잘 갖춰진 상황에 맞추어, 간단하게 웹 브라우저로 볼 수 있는 인터넷 사이트 프로그램을 제작한다.
본 논문에서는 온라인 평가를 쉽고 편하게 관리할 수 있는 시스템을 설계하고 구현하였다. 온라인 평가에서 요구되는 사항과 시나리오를 정리하였고, 이를 구현하기 위한 모델을 설계하고, 이를 반영한 실제 시스템을 구현하였다.

성능/효과

객관식은 자동적으로 채점되고, 교수자는 응시자가 푼 주관식 문제를 사이트의 채점 서비스를 통해 수행할 수 있다. 또한 해당 시험의 통계를 사이트의 통계보기 서비스를 통해 총 평균, 총 응시자, 정답률 등 시험정보를 손쉽게 확인 할 수 있다. 마지막으로 교수자는 응사자가 보낸 의견을 사이트의 Q&A 서비스를 통해 쉽게 피드백을 수행 할 수 있다.

후속연구

추후 과제로 최근 대형화 되고 있는 온라인 강의의 추세를 볼 때, 주관식 단답식의 경우 유사 키워드, 단어를 정리한 색인과 적용시스템, 서술식의 경우 문맥의 유사단어 기출빈도 등을 분석하는 시스템을 적용할 계획이다. 또한, 공식의 표현 등 특수문자의 입력 방식체계도 고려하여, 보다 세분화된 분류와 설계방안을 같이 제시할 예정이다.
추후 과제로 최근 대형화 되고 있는 온라인 강의의 추세를 볼 때, 주관식 단답식의 경우 유사 키워드, 단어를 정리한 색인과 적용시스템, 서술식의 경우 문맥의 유사단어 기출빈도 등을 분석하는 시스템을 적용할 계획이다. 또한, 공식의 표현 등 특수문자의 입력 방식체계도 고려하여, 보다 세분화된 분류와 설계방안을 같이 제시할 예정이다.

질의응답

핵심어	질문	논문에서 추출한 답변
	이러닝이란?	온라인 학습도구는 초기에 이러닝 관련 시스템의 개발과 함께 성장했다. 이러닝(e-learning)은 네트워크를 통하는 모바일이나 인터넷 등의 온라인 통신 방식을 이용하여, 시간 및 공간에 구애받지 않고 학습할 수 있는 교육 방법으로 시간과 장소에 국한된 오프라인 교육의 제약을 극복할 수 있는 학습 방법으로, 온라인을 이용한 원격 교육, 사이버 교육 등의 학습 방법을 의미한다고 할 수 있다.
	대학을 포함한 많은 기관에서의 평가는 주로 오프라인 평가를 통해 이루어지는 이유는?	대학을 포함한 많은 기관에서의 평가는 주로 오프라인 평가를 통해 이루어진다. 객관식 문제로 그 사람의 역량을 판단하기에는 한계가 있기 때문에, 논리적으로 복잡한 문제를 풀거나, 수학적으로 계산 및 프로그래밍을 동반한 복합적 문제를 제한 없이 답안지에 표현할 수 있는 주관식으로 평가되기 때문이다. 또한 평가의 공정성과 보안상의 이유로도 주로 오프라인 평가가 행해진다.
	평가의 피드백은 어떤 이점을 가져오는가?	수강자 개개인의 역량을 평가하고, 성취도를 평가하고, 클래스의 전체 교육의 효과를 판정한다. 이러한 평가의 피드백을 통해, 문제점을 찾고 해결하며, 수업에서의 교육 방법의 질적 개선을 도모할 수 있다. 대학을 포함한 많은 기관에서의 평가는 주로 오프라인 평가를 통해 이루어진다.

참고문헌 (12)

김성렬.김종두, "온라인 시험의 가능성 탐색," 한국교육교원연구, 한국교원교육학회, 한국교원교육연구, 제24권, 제1호, 2007년, pp.347-367.
오양가체렝검버.이길흥, "이러닝 협동학습 평가 모델 개발," 디지털산업정보학회, 디지털산업정보학회논문지, 제11권, 제1호, 2015, pp.135-144.

원문보기 상세보기
박영호, "상시학습 시스템 설계에 관한 연구," 디지털산업정보학회, 디지털산업정보학회논문지, 제10권, 제3호, 2014, pp.61-70.
심선경, "온라인수업에서 학습도구와 학습성취, 학습만족간의 관계연구," 한국콘텐츠학회, 한국콘텐츠학회논문지, 제12권, 제3호, 2012, pp.487-497.

원문보기 상세보기
김경덕.이상운, "웹에서 문제 해결 기반 및 자기 주도적 학습 시스템의 설계와 구현," 멀티미디어학회논문지, 제7권, 제7호, 2004, pp.944-955.

원문보기 상세보기
배순한.김지훈.임양환, "멀티미디어 온라인 학습 컨텐츠의 특성이 학습자의 학습 효과에 미치는 영향에 관한 연구," 디지털산업정보학회, 디지털산업정보학회논문지, 제5권, 제1호, 2009, pp.127-139.

원문보기 상세보기
박선주.강아영.박지은.마대성.김철.김정랑, "교사의 직무수행을 위한 ICT활용능력 자기평가 도구 개발 및 적용," 정보교육학회, 정보교육학회논문지, 제10권, 제3호, 2006, pp.299-306.

원문보기 상세보기
이현구, "온라인 평가시스템 및 온라인 평가방법," 특허 제10-2011-0091082, 2011.
김성준, "통합형 온라인 평가 시스템 및 방법," 특허 제10-2015-0015178, 2015.
이영석.조정원, "온라인 평가 문항 관리 시스템의 설계," 한국컴퓨터교육학회, 한국컴퓨터교육학회논문지, 제15권, 제6호, 2012, pp.33-41.
홍기천.양희연, "문항간 이동이 자유로운 교육 평가 시스템의 설계 및 구현," 한국정보교육학회, 정보교육학회논문지, 제11권, 제2호, 2007, pp.147-156.

원문보기 상세보기
신선희, "공학교육에서의 개념학습을 위한 온라인 학습 커뮤니티의 설계와 탐구활동 지원도구의 평가," 한국공학교육학회, 공학교육연구, 제16권, 제1호, 2013년, pp.3-14.

원문보기 상세보기

저자의 다른 논문 :

표제어: PCR

동의어: Packet Collision Rate

용어 설명 출처 목록 (6)

용어 설명: PCR은 세균 특이성이 있는 primer를 이용하여 적은 수의 세균이 있을지라도 쉽게 검출할 수 있는 유용한 방법이며, 이를 이용하여 구강 내 치면세균막이나 타액에서 직접 세균을 검출할 수 있게 되었다[8].

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증