선택한 단어 수는 입니다.
최소 단어 이상 선택하여야 합니다.
최소 단어 이상 선택하여야 합니다.
선택한 단어 수는 30입니다.
최대 10 단어까지만 선택 가능합니다.
최대 10 단어까지만 선택 가능합니다.
문제 정의
- 그래서 본 논문에서는 문항간 이동이 가능한 교육평가 시스템을 개발하였다. 이 시스템에서는 기존의 평가시스템에서 제공해주는 맞고 틀림, 총 정답수등과 같은 기본 정보 이외에도 각 문항에 소요된 시간, 답안 변경 내역, 각 문항의 방문 횟수등과 같은 심화된 정보를 알 수 있도록 하였다.
- 본 논문에서는 이러한 기본 정보와 심화된 정보를 모두 응시자가 알 수 있는 시스템을 개발하는 것이 목적이다[12].
- 본 논문에서는 컴퓨터이용검사 시스템을 개발하였다. 기존의 검사시스템들은 지필검사를 그대로 컴퓨터로 옮겨놓은 형식에 불과하였으며, 최종점수, 맞고 틀림과 같은 기본적인 정보만제공해 주었다.
- 본 설문조사의 목적은 지필검사와 개발된 시스템에 대해서 어떻게 느끼고 있는지를 알아보기 위해서이다. 그래서 67명의 학생들에게 지필검사를 먼저 치르게 한 후 직후에 개발된 시스템으로 검사를 치르도록 하였다.
제안 방법
- 이 주관식 문항를 해결한 후 나중에 다시 그 주관식 문항을 방문했을 때, 저장해놓았던 답안을 불러오는 과정에서 약간의 기술적인 오류가 있었다. 1차 테스트 기간에는 큰 오류는 생기지 않았기 때문에 1달 후에 실전으로 검사를 실시하였다. 2차 검사에서는 여러 가지 주의사항을 미리 주지시켰다.
- 개발된 시스템의 유용성을 알기 위해서 1차적인 사전테스트를 실시하였다. 실시한 결과, 학생들의 실수로 인한 오류와 시스템 자체의 오류로 귀결되었다.
- 물론 검사유형별로 문항은 다르게 제작하였다. <표 3>과 같이 설문조사는 총 12문항(객관식 10개, 서술식 2개)를 가지고 실시하였다.
- 각 모듈별 기능은 (그림 1)과 같다. 관리자 모듈에서 문제입력, 회원관리, 게시판 관리는 모두 제로 보드에서 제공하는 관리프로그램을 그대로 이용하였으며, 필요에 따라서 회원가입시 학과, 학번, 수강과목과 같은 필드에 대해서는 PHP로 되어있는 제로보드의 소스코드를 고쳐서 이용하였다. 응시결과보기는 학생별 결과 보기와 문항별 결과보기로 나누어서 볼 수 있도록 하였다.
- 치렀다. 그 후 설문조사를 하여 두 가지 방법에 대한 여러 가지 반응을 알아보았다. 설문 조사 결과, 학생들이 아직은 지필검사에 익숙해져 있고, 컴퓨터검사에 대해서는 심리적인 불안감을 느끼고 있다는 것을 알 수 있었다.
- 그래서 67명의 학생들에게 지필검사를 먼저 치르게 한 후 직후에 개발된 시스템으로 검사를 치르도록 하였다. 물론 검사유형별로 문항은 다르게 제작하였다.
- 앞서 표 1에서 언급된 다양하고심화된 정보를 제공해 주지 못하고 있다. 그래서 본 논문에서는 기본 정보 이외에 전체시간, 응시시간, 최종점수, 맞고 틀림, 답안변경횟수, 답안변경내역, 문항의 이동 내역등과같은 심화된 정보를 알 수 있도록 하였다.
- 그러나 본 시스템에서는 전체시간, 응시시간, 최종점수, 맞고 틀림, 답안변경횟수, 답안변경내역, 문항의 이동 내역등과 같은 다양한 정보를 제공하였다.
- 응시결과보기는 학생별 결과 보기와 문항별 결과보기로 나누어서 볼 수 있도록 하였다. 또한 응시자가 시험을 치룬 뒤 시험에 관련된 총 12문항(객관식 10문항, 주관식 2문항)으로 구성된 설문조사를 실시하도록 하였다. 응시자 모듈에서는 응시자가 시험을 치르고 저장하는 기능, 시험을 완료하면 본인의 시험 성적 확인기능을 추가하였다.
- 문항별 결과보기는 각 문항별로 방문횟수, 응시횟수, 전체시간, 응시시간, 정답자수, 답안변경횟수를 볼 수 있도록 하였다. (그림 7(a))는 총 13문항으로 구성된 각 문항별 결과를 보여준다.
- 본 연구에서는 지필검사를 치른 직후에 본 시스템으로 시험을 치렀다. 그 후 설문조사를 하여 두 가지 방법에 대한 여러 가지 반응을 알아보았다.
- 관리자 모듈에서 문제입력, 회원관리, 게시판 관리는 모두 제로 보드에서 제공하는 관리프로그램을 그대로 이용하였으며, 필요에 따라서 회원가입시 학과, 학번, 수강과목과 같은 필드에 대해서는 PHP로 되어있는 제로보드의 소스코드를 고쳐서 이용하였다. 응시결과보기는 학생별 결과 보기와 문항별 결과보기로 나누어서 볼 수 있도록 하였다. 또한 응시자가 시험을 치룬 뒤 시험에 관련된 총 12문항(객관식 10문항, 주관식 2문항)으로 구성된 설문조사를 실시하도록 하였다.
- 응시자 이름을 클릭하면 각 문항별로 답안 변경 횟수와 변경 내역, 그리고 추가적인 프로파일을 알 수 있도록 하였다. (그림 6(b))는 어느 학생의 답안 변경 내역을 보여준다.
- 개발하였다. 이 시스템에서는 기존의 평가시스템에서 제공해주는 맞고 틀림, 총 정답수등과 같은 기본 정보 이외에도 각 문항에 소요된 시간, 답안 변경 내역, 각 문항의 방문 횟수등과 같은 심화된 정보를 알 수 있도록 하였다.
- 평가 시스템에 관련된 연구를 하였다[4]. 이 연구에서는 문항간 이동이 불가능하도록 되어있으나 해당 문항에서 답안 선택 횟수는 기록이 가능하도록 설계되었다. 문항 간이 동이 불가능하기 때문에 심화된 정보를 알 수는 없다.
- 실시하였다. 지필검사를 먼저 치르게하고 직후에 컴퓨터 검사를 실시하였다. 물론 지필검사의 문항과 컴퓨터 검사의 문항은 다르게 하였다.
- 학생별 응결과보기에서는 ID, 학과, 학번, 이름, 방문 횟수, 응시횟수, 전체시간, 응시시간, OX형점수, 선다형점수, 답안변경횟수를 볼 수 있도록 하였다. 전체시간이란 시험을 시작해서 끝날때까지의 시간을 기록한 것이다.
- 회원가입 버튼을 누르면 된다. 회원가입시 작성해야 하는 필드 중, 제로보드에서 기본적으로 제공하는 필드 이외에 (그림 4)와 같이 학과, 학번, 수강과목, 휴대전화 필드를 추가하였다. 이는 PHP로 되어있는 제로보드 소스를 수정함으로 가능하다.
대상 데이터
- 저작도구를 이용하는 방법과 LMS에서 제공하는 검사방법은 본 논문에서 개발한 시스템과의 비교대상이 아니다. 그래서 본 논문에서는 학위논문 등의 이유로 개발된 평가시스템을 비교대상으로 선정하였다.
- 본 연구에서는 67명의 학생들을 대상으로 지필 검사와 컴퓨터 검사를 실시하였다. 지필검사를 먼저 치르게하고 직후에 컴퓨터 검사를 실시하였다.
성능/효과
- 4, 5, 10번의 결과를 보면, 학생들은 본 시스템에 대해서 흥미롭고 답을 변경하기 쉽다는 장점이 있다는 것을 알 수 있었다.
- 즉, 쉬운 문제를 먼저 치르고 어려운 문제는 나중에 치른다든가, 또는 어떤 특정 문제에 많은 시간을 집중했는가와 같은 의미한다. 8번의 설문 내용을 보면 컴퓨터 검사를 하면 이러한 지식을 얻을 수 있어서 좋았다라는 것을 알 수 있었다.
- 설문 조사 결과, 학생들이 아직은 지필검사에 익숙해져 있고, 컴퓨터검사에 대해서는 심리적인 불안감을 느끼고 있다는 것을 알 수 있었다. 그러나 컴퓨터검사를 치른 후에 각 학생에게 자신의 다양한 정보를 보여준 결과, 컴퓨터검사에 대한 신뢰도가 높아졌다는 것을 확인할 수 있었다.
- 그리고 지필 검사에 대한 결과를 통보할 때 컴퓨터검사의 결과를 서면으로 다시 학생들에게 제공해 주었다. 본 시스템에서 제공한 결과를 받아본 학생들은 지필검사에서 알 수 없었던 양질의 다양한 정보를 알게 되었고, 그제서야 컴퓨터 이용검사에 대한 필요성과 신뢰도가 높아졌다고 서술식 문항 11번에 기록한 학생이 있었다.
- 응시자 모듈에서는 응시자가 시험을 치르고 저장하는 기능, 시험을 완료하면 본인의 시험 성적 확인기능을 추가하였다. 본 시스템의 가장 큰 특징은 응시자가 번호를 임의적으로 이동하면서 문제를 풀 수 있다는 점이다. 지필고사에서도 어려운 문제는 놔두고 쉬운 문제부터 치른다든지, 이미 치른 문제도 검토를 위해서 다시 한 번 치르도록 하고 있기 때문이다.
- 그 후 설문조사를 하여 두 가지 방법에 대한 여러 가지 반응을 알아보았다. 설문 조사 결과, 학생들이 아직은 지필검사에 익숙해져 있고, 컴퓨터검사에 대해서는 심리적인 불안감을 느끼고 있다는 것을 알 수 있었다. 그러나 컴퓨터검사를 치른 후에 각 학생에게 자신의 다양한 정보를 보여준 결과, 컴퓨터검사에 대한 신뢰도가 높아졌다는 것을 확인할 수 있었다.
- 실시하였다. 실시한 결과, 학생들의 실수로 인한 오류와 시스템 자체의 오류로 귀결되었다.
후속연구
- 그리고 학생 개개인에 대한 좀 더 다양한 정보를 알 수 있도록 해야 할 것이다.
- 예를 들어, 8번 문제를 풀고나서 3번 문제로 가려면 이전버튼을 여러번 누르면 된다. 설문 조사 결과에 따르면 여러번 마우스를 클릭하는 게 오히려 좋지 않다라는 응답이 나왔기 때문에 향후에는 해당 문제로 바로 이동하는 방법으로 전환해야 할 것이다. 그리고 화면의 상단 오른쪽에 남은시간을 실시간으로 표시하여서 학생들이 시간배분을 할 수 있도록 하였다.
- 그러나 평가결과로 제공되는 내용은 피험자들의 성적 분포, 문항난이도, 문항변별도, 문항 반응분포도 등과 같은 좋은 정보를 알 수 있다. 이 시스템에서 본 논문에서 제안한 시스템의 기능을 포함한다면 훌륭한 평가시스템이 될 수 있으리라 판단된다.
- 향후 연구 과제로는 문제를 보여주는 화면의 배경색이나 글씨체를 학생이 시험을 보기전에 선택하게 하는 것과, 각 문제를 이동할 때 직접 이동할 수 있도록 해야 할 것이다. 그리고 학생 개개인에 대한 좀 더 다양한 정보를 알 수 있도록 해야 할 것이다.
- 그대로 이용하였다. 향후에는 문제 입력하는 관리 프로그램도 개발해야 할 것이다. (그림 2)는 문제와 관련된 테이블에 입력된 문제를 보여준다.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.