[논문]문제중심학습에서 평가주체에 따른 평가 - 튜터평가, 동료평가, 자기평가를 중심으로

김수진; 강희경

doi:10.5762/kais.2013.14.8.3732

문제중심학습에서 평가주체에 따른 평가 - 튜터평가, 동료평가, 자기평가를 중심으로
Problem Based Learning Evaluation and Evaluation Agents - Focused on Tutor, Peer and Self Evaluation 원문보기

한국산학기술학회논문지 = Journal of the Korea Academia-Industrial cooperation Society, v.14 no.8, 2013년, pp.3732 - 3738

초록
AI-Helper

본 연구는 문제중심학습에서 튜터, 동료, 자기평가간의 평가점수를 비교하고 평가주체 점수간의 관련성과 평가주체별로 평가에 영향을 미치는 평가영역을 알아보는데 목적이 있다. 이를 위해 문제중심학습으로 수업받는 간호학과 학생 105명을 대상으로 문제중심학습 효과도구를 가지고 3차에 걸쳐 튜터, 동료, 자기평가를 실시하였다. 수집된 자료는 SPSS WIN(V. 12.0)으로 분석하였다. 연구결과 3차례의 수업 모두 자기평가 점수가 튜터, 동료평가 점수보다 높았다. 평가주체별 점수간의 관계는 3차례의 수업에서 튜터평가와 동료평가간에 관련성이 있었다. 평가주체별 평가에 영향을 미치는 평가영역은 튜터평가는 '문제해결능력'이었고, 동료평가와 자기평가는 '협동학습능력'이었다.

Abstract ▼ AI-Helper

This study was conducted to compare the evaluation scores among different evaluation agents-tutor, peer and self evaluation. It also aimed to identify the correlations among the evaluation agents and each agent's influencing factors that can have impact on PBL evaluation. 105 nursing students who had PBL methods in their learning had 3 different tutor, peer and self evaluation consecutively with the PBL Effectiveness Evaluation Tool. Self evaluation score was higher than both tutor and peer evaluation for 3 different evaluation. There was a significant correlation between tutor evaluation and peer evaluation. 'Problem solving ability' for tutor evaluation and 'Cooperative learning ability' for peer evaluation and self evaluation were the influencing factors.

주제어

AI 본문요약
AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

문제 정의

본 연구는 PBL에서 평가주체 즉 튜터, 동료, 학생 자신간의 평가 차이와 관계를 확인하고 튜터평가, 동료평가, 자기평가에 영향을 미치는 평가영역을 알아보고자 시도되었다.
이에 본 연구는 PBL에서 평가 주체인 튜터, 동료, 학생 자신간의 평가점수를 비교하고 그 관련성을 알아보며 각 평가주체별 평가에 영향을 미치는 평가영역이 무엇인지를 알아보고자 시도되었다. 이를 통해 PBL의 교육목표를 달성할 수 있는 평가방식에 대한 시사점을 도출함으로써 신뢰성 있는 PBL 평가지침을 마련하기 위한 기초자료를 제공하고자 한다.
PBL에 대한 그간의 연구는 효과에 초점을 둔 것이 대부분이며, 평가에 대한 연구는 비교적 드물었다. 이에 본 연구는 PBL에서 평가 주체인 튜터, 동료, 학생 자신간의 평가점수를 비교하고 그 관련성을 알아보며 각 평가주체별 평가에 영향을 미치는 평가영역이 무엇인지를 알아보고자 시도되었다. 이를 통해 PBL의 교육목표를 달성할 수 있는 평가방식에 대한 시사점을 도출함으로써 신뢰성 있는 PBL 평가지침을 마련하기 위한 기초자료를 제공하고자 한다.

제안 방법

본 연구에서 PBL 수업은 토론과 그룹활동, 자율학습, 발표, 강의, 실습으로 진행되었다. 한반은 25-28명이며 소그룹 활동을 위해 1개 반을 5개의 그룹으로 나누고 그룹당 5-6명으로 구성하였다.
이 과정에서 그룹별로 담당교수와의 지도 시간을 통해 자율학습과 협동학습 과정이 제대로 진행되고 있는지 점검 받도록 하였다. 실습은 문제상황과 관련된 실습 시나리오를 가지고 진행하였다.
위와 같은 과정으로 총 7주 동안 3개의 문제상황이 포함된 1개 패키지를 가지고 PBL이 이루어졌고 도구는 1차, 2차, 3차 수업이 끝난 후 작성되었다.
토론은 실제 임상상황으로 구성한 문제상황이 포함된 패키지를 가지고 진행하였다. 토론 수업 후에는 학습자가 토론 수업에서 도출된 그룹별 과제를 개인별 자율학습과 그룹별 협동학습 과정을 통해 학습한 후 발표하였다. 이 과정에서 그룹별로 담당교수와의 지도 시간을 통해 자율학습과 협동학습 과정이 제대로 진행되고 있는지 점검 받도록 하였다.
한반은 25-28명이며 소그룹 활동을 위해 1개 반을 5개의 그룹으로 나누고 그룹당 5-6명으로 구성하였다. 토론은 실제 임상상황으로 구성한 문제상황이 포함된 패키지를 가지고 진행하였다. 토론 수업 후에는 학습자가 토론 수업에서 도출된 그룹별 과제를 개인별 자율학습과 그룹별 협동학습 과정을 통해 학습한 후 발표하였다.

대상 데이터

본 연구는 2002년도 교육과정에 PBL을 도입한 이후 지금까지 전공과목에 PBL을 시행하고 있는 C대학교 간호학과 학생 중 연구자가 수업을 담당하는 3학년 105명을 대상으로 하였다.
자료수집과정에서 연구자는 본 연구의 목적과 방법, 익명성 보장 및 연구목적 외에 다른 용도로 사용되지 않음을 설명하였다. 이에 동의한 138명을 대상으로 총 3회 설문지를 배부하여 분석에 부적합한 자료를 제외한 105부를 최종 분석하였다.

데이터처리

학습자의 일반적 특성은 빈도와 백분율을 구하였다. 평가시기에 따른 평가주체간의 점수 비교는 ANOVA를 실시하였고 튜터평가, 동료평가, 자기평가 점수간의 관계는 상관분석을 하였다. 평가주체별로 영향을 미치는 평가영역 확인은 단계적 다중회귀분석을 하였다.
평가주체별 점수에 영향을 미치는 평가영역을 알아보기 위하여 ‘문제해결능력’, ‘통합능력’, ‘의사소통능력’, ‘협동학습능력’, ‘자율학습능력’을 독립변수로 하여 다중 회귀분석하였다.
평가시기에 따른 평가주체간의 점수 비교는 ANOVA를 실시하였고 튜터평가, 동료평가, 자기평가 점수간의 관계는 상관분석을 하였다. 평가주체별로 영향을 미치는 평가영역 확인은 단계적 다중회귀분석을 하였다.
0)을 이용하여 분석하였다. 학습자의 일반적 특성은 빈도와 백분율을 구하였다. 평가시기에 따른 평가주체간의 점수 비교는 ANOVA를 실시하였고 튜터평가, 동료평가, 자기평가 점수간의 관계는 상관분석을 하였다.

이론/모형

튜터평가, 동료평가, 자기평가는 김수진 외[8]가 개발한 PBL 효과 설문지를 이용하였다. PBL 효과 도구는 PBL 수업에서 요구되는 문제해결능력, 통합능력, 협동학습능력, 의사소통능력, 자기주도학습능력의 5개 영역, 17개 항목으로 구성되어 있다.

성능/효과

1, 2, 3차 수업에서 튜터, 동료, 자기평가 점수간의 상관관계 분석결과는 유의수준 0.05에서 튜터평가와 동료 평가 점수간에 상관관계(.375, .435, .573)가 있었고 튜터자기평가, 동료-자기평가간에는 관련성이 없었다[Table 3-5].
평가시기에 따라 평가주체간의 점수는 유의한 차이가 있었다(Table 2). 1차, 2차, 3차 수업 모두 자기평가, 동료 평가, 튜터평가 순으로 자기평가가 다른 두 평가자의 점수보다 높았고 튜터평가 점수는 가장 낮았다.
튜터, 동료, 자기평가에 영향을 미치는 평가영역을 살펴보면 튜터평가에 가장 영향을 미치는 평가영역은 문제해결능력이었고 통합능력, 협동학습능력 순이었다. 동료 평가에 가장 영향하는 평가영역은 협동학습능력이었고 다음이 문제해결능력, 의사소통이었다. 자기평가에 가장 큰 영향을 미치는 평가영역은 협동학습능력이었으며 다음으로 문제해결능력이었다[Table 6].
먼저 평가시기에 따른 평가주체간의 점수를 비교한 결과 세차례의 수업 모두 자기평가 점수가 가장 높았고 동료평가, 튜터평가 점수 순이었다. PBL에서 평가주체별 평가점수의 차이에 대한 국내 연구가 거의 없는 상황에서 본 연구와 유사한 채수진의 연구[9]에서는 동료평가, 자기평가, 튜터평가 점수 순으로 동료평가의 점수가 가장 높았다.
본 연구에서 PBL의 평가방법과 배점은 출석 30점, 튜터평가 10점, 동료평가 5점, 자기평가 0점, 실습시험 10점, 시험(중간고사, 기말고사) 50점이었다.
연구결과, 튜터평가에 영향을 미치는 가장 큰 평가영역은 ‘문제해결능력’이었으며 동료평가와 자기평가는 ‘협동학습능력’이 가장 중요한 영역이었다.
튜터, 동료, 자기평가에 영향을 미치는 평가영역을 살펴보면 튜터평가에 가장 영향을 미치는 평가영역은 문제해결능력이었고 통합능력, 협동학습능력 순이었다. 동료 평가에 가장 영향하는 평가영역은 협동학습능력이었고 다음이 문제해결능력, 의사소통이었다.

후속연구

이런 이유로 대부분 튜터에 의한 평가에 의존하거나 튜터평가 외에 다른 평가방법을 사용하더라도 점수 반영이 되지 않는 참고용으로 활용하면서 지필 고사 비율이 매우 높은 것이 사실이다. 교육을 시행하고 그 목적을 달성했는지 측정하는 것이 평가라면 문제해결력, 자기주도학습능력, 협동학습능력, 비판적 사고능력 등을 목적하는 PBL의 평가도 목적에 맞게 개발, 시행되어야 할 것이다. 이에 PBL의 평가가 실용적으로 수행되기 위해서는 시간과 비용을 수용 가능한 수준으로 유지할 수 있는 방안을 찾는 연구가 수행되어야 할 것이다.
둘째, 향후 튜터평가, 동료평가, 자기평가 점수와 학업성취도를 측정하는 지필시험 점수와 비교하는 연구를 통해 지필시험과 PBL 평가간의 관련성을 살펴볼 필요가 있다.
하지만 동료평가는 학생으로 하여금 자신의 학습준비도, 학습동기, 성실도, 다른 학생들과의 관계 등에 대해 스스로 생각하고 반성할 수 있는 기회를 제공할 뿐만 아니라 튜터가 혼자의 힘으로 모든 학생들을 제대로 평가하기 어렵다고 판단될 때 자기평가와 함께 참고할 수 있는 방법이다[9]. 따라서 동료평가의 단점을 보완한 평가기준을 명확하게 설정한 후 학습자들에게 이러한 동료평가의 기준을 알리고 동시에 동료에게 객관적으로 점수를 부여할 수 있도록 오리엔테이션이 이루어져야 할 것이다. PBL에서 자기평가는 학생들이 스스로의 학습과정과 결과를 평가하는 경험을 통해 초인지 능력이 길러지고 수업에 적극적으로 참여할 수 있다는 장점 때문에 시행되고 있으나 등급을 매길 목적으로 악용되는 등 동료평가와 마찬가지로 튜터평가보다 정확성과 객관성 확보가 어렵고 수업과정에서 자신이 행한 중요한 일을 기억하지 못하여 불완전한 평가를 하거나 자신의 수행을 과대평가 혹은 낮게 평가하는 단점이 있다[9].
셋째, 향후 PBL 평가시 본 연구결과를 참고하여 평가 주체별 반영 비율을 현실적으로 고려한 실제적인 PBL 평가가 이루어져야 할 것이다.
교육을 시행하고 그 목적을 달성했는지 측정하는 것이 평가라면 문제해결력, 자기주도학습능력, 협동학습능력, 비판적 사고능력 등을 목적하는 PBL의 평가도 목적에 맞게 개발, 시행되어야 할 것이다. 이에 PBL의 평가가 실용적으로 수행되기 위해서는 시간과 비용을 수용 가능한 수준으로 유지할 수 있는 방안을 찾는 연구가 수행되어야 할 것이다. 이상의 결과를 토대로 다음을 제언한다.
첫째, 본 연구에서는 일개 대학에서 사용한 평가준거를 이용하였으므로 향후 PBL을 도입한 다른 대학의 평가 도구에서 측정하고 있는 것을 확인하고 이에 따른 반복 연구가 이루어져야 할 것이다.

질의응답

핵심어	질문	논문에서 추출한 답변
	PBL의 특징은 무엇인가?	또한 평가방법에서도 객관성의 확보라는 이유로 선다형이나 단답형의 문제가 주류를 이루어왔다[4]. 반면 PBL은 수업에서 학생들의 다양한 관점이 허용되는 것처럼 평가에서도 평가의 주체가 학생 자신, 동료 그리고 교수자로 어느 한 사람에게 한정되지 않는 것이 특징이다. 또한 결과보다 학습 과정이 매우 중시되므로‘무엇을 알게 되었는가’보다 ‘어떻게 알게 되었는가’에 초점을 맞춘 과정지향 평가가 이루어진다. 이러한 과정지향 평가에 해당하는 평가방법으로 교수에 의한 관찰평가, 자기평가, 동료평가, 포트폴리오 평가 등이 있다[5].
	문제중심학습은 무엇이라 정의할 수 있는가?	특히 21세기의 사회에서 그러한 고차적 능력들의 중요성이 강조되고 있고, 지식의 구성과 학습자 중심의 학습을 강조하는 구성주의 패러다임과 접목되면서 PBL은 더욱 주목 받게 되었다[2]. PBL은 실세계의 비구조화된 문제로 시작하여 문제를 해결하는 과정을 통해 필요한 지식을 학습자 스스로 배울 수 있도록 이끌어 가는 학습자 중심의 교육적 접근이라고 정의할 수 있다[3].
	과정지향 평가에 해당하는 평가방법으로 무엇이 있는가?	또한 결과보다 학습 과정이 매우 중시되므로‘무엇을 알게 되었는가’보다 ‘어떻게 알게 되었는가’에 초점을 맞춘 과정지향 평가가 이루어진다. 이러한 과정지향 평가에 해당하는 평가방법으로 교수에 의한 관찰평가, 자기평가, 동료평가, 포트폴리오 평가 등이 있다[5]. 그러나 PBL을 시행하고 있는 많은 대학들이 PBL 도입과 운영과정에서 부딪히게 되는 가장 큰 어려움의 하나로 학생평가를 들고 있다[6-7].

참고문헌 (16)

Duch, B. J., Groh, S. E., and Allen, D. E. The power of problem-based learning: A practical "How to" for teaching undergraduate courses in any discipline. VG: Stylus publishing, 2001.
J. L. Chio, and K. W. Jang. How to use PBL in classroom. Hakjisa publisher, 2010.
Y. S. Cho. Theory and practice in PBL. Hakjisa publisher, 2008.
H. K. Lim, K. M. K. Kim, E. S. Kong, and K. K. Kim, "A study on the develpoment and application of the evaluation tool for the problem based learning in nursing education", Jesus University Journal of Nusing, 1(1), pp. 43-59, 2002.
I. A. Kang, "PBL as an Adult Learning Method", Journal of Nursing Query, 11(1), pp. 26-54, 2002.
E. H. Park, J. H. and Park, Y. N. Park, "PBL Experience -Keimyung university School of medicine", Korean Journal of Medical Education, 12(2), pp. 261-270, 2000.
I. W. Chug, C. J. Shin, H. S. Han, and Y. J. Song, "PBL practice and it's evaluation in Chungbuk national university college of medicine", Korean Journal of Medical Education, 11, pp. 285-295, 1999.
S. J. Kim, J. H. Yang, H. S. Kim, S. G. Chae, and J. H. Lim, "Scale Development of Effect on Problem-Based Learning (PBL)", The Journal of Educational Research, 8(3), pp. 221-239, 2010.
S. J. Chae. A study on reliability and validity of student assessment in problem based learning -focused on the case of a medical college. Unpublished doctoral dissertation, Sungshin Women's University, 2004.
Sullivan, M. E, "Peer and self assessment during problem based tutorials", The American Journal of Surgery, 177, pp. 266-269, 1999. DOI: http://dx.doi.org/10.1016/S0002-9610(99)00006-9

상세보기
Miller, P. J, "The agreement of peer assessment andself assessement of learning processes in problem based learning", Journal of Physical Therapy Education, 13, pp. 26-30, 2000.
H. M. Cho, "An Assessment tool from the view point of constructivism", The Journal of Education, 18(1), pp. 183-197, 2000.
B. H. Jang, "Evaluation in problem based learning", 12th Annual The Korean Society of Medical Education Conference, Korean Journal of Medical Education, pp. 89-102, 2001.
Rezler, A. G, "Self assessment in problem based groups", Medical Teacher, 11(2), pp. 151-156, 1989. DOI: http://dx.doi.org/10.3109/01421598909146318

상세보기
K. W. Jo, "The perception of student nurse for problem based learning", The Journal of Korean Academic Society of Nursing Education, 6(2), pp. 359-375, 2000.
S. J. Chea, "A study on concordance of student assessment in Problem Based Learning of medical schools. -focused on the tutor, peer, self-assessment, The Journal of Yeolin Education, 14(1), pp. 331-349, 2006.

저자의 다른 논문 :

표제어: PCR

동의어: Packet Collision Rate

용어 설명 출처 목록 (6)

용어 설명: PCR은 세균 특이성이 있는 primer를 이용하여 적은 수의 세균이 있을지라도 쉽게 검출할 수 있는 유용한 방법이며, 이를 이용하여 구강 내 치면세균막이나 타액에서 직접 세균을 검출할 수 있게 되었다[8].

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증