[논문]원격교육의 효과성 향상을 위한 콘텐츠 품질수준 분석

김자미; 김용; 이원규

doi:10.5762/kais.2010.11.5.1838

원격교육의 효과성 향상을 위한 콘텐츠 품질수준 분석
Analysis of the Quality of Distance Education Contents in Pursuit of Better Educational Effectiveness 원문보기

한국산학기술학회논문지 = Journal of the Korea Academia-Industrial cooperation Society, v.11 no.5, 2010년, pp.1838 - 1844

김자미 (고려대학교 컴퓨터교육학과) , 김용 (한국교육학술정보원) , 이원규 (고려대학교 컴퓨터교육과)

초록
AI-Helper

원격교육에서 콘텐츠는 교육내용을 학습자에게 전달하는 역할을 하고 있다. 따라서 콘텐츠 품질관리는 궁극적으로 원격교육의 품질을 높이기 위한 시작이라 하겠다. 콘텐츠 품질관리와 관련된 기존의 연구들은 대부분 평가도구 개발에 집중되었다. 실제 콘텐츠 품질을 분석한 연구가 진행되지 못한 것은, 콘텐츠 품질분석을 위한 평가위원이나 콘텐츠 선정 등의 어려움 때문이었다. 본 연구는 원격교육에서 직무나 자격연수용으로 사용되는 콘텐츠 58개의 품질을 분석하였다. 분석한 결과, 학습내용 부문의 품질이 가장 높았다. 각 부문의 요소별 품질에서는 학습내용 부문의 학습수준과 학습내용 구성 요소의 품질을 개선할 필요가 있었다. 교수설계 부문에서는 상호작용 요소의 품질을 개선해서 콘텐츠의 품질을 높여야 할 것으로 분석되었다. 본 연구 결과는 콘텐츠를 개발하는 개발자나 제공자의 입장에서 콘텐츠의 품질을 향상시키기 위해서 어떤 부분의 품질이 개선되어야 하는지에 대한 시사점을 제공할 수 있을 것으로 본다.

Abstract ▼ AI-Helper

In distance education, contents are to convey what to learn to learners, and the efficient quality assurance of contents is the very first step to the enhancement of distance education. Most studies of the quality assurance of contents have mostly centered around the development of evaluation tools, and few studies have ever focused on analysis of the quality of contents itself, since it's not easy to do that due to difficulties in the selection of evaluatees or of contents to be analyzed. The purpose of this study was to analyze the quality of 58 distance education contents of on-the-job training and another training for the acquisition of qualifications. As a result, the contents of the learning contents segment ranked first. Among the components of each segment, there was room for improvement in the level of learning and learning elements in the learning contents segment. In terms of instructional design, the quality of interaction components should be taken to another level to boost the quality of contents in this segment. The findings of the study are expected to give some suggestions about which parts of contents should be improved in quality from a perspective of contents developers or suppliers to enhance the overall quality of contents.

주제어

AI 본문요약
AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

문제 정의

원격교육에서 콘텐츠는 학습내용을 충실히 제공할 수 있는 역할을 하기 때문에 교육적으로 매우 중요한 의미를 갖는다. 따라서 본 연구는 콘텐츠를 개발하는 개발자나 제공자의 입장에서 콘텐츠의 품질을 향상시키기 위해서 어떤 부분의 품질이 개선되어야 하는지에 대한 시사점을 제공할 수 있을 것으로 본다.
그 중 콘텐츠는 교육내용을 담고 있기 때문에 콘텐츠의 품질은 직간접적으로 학습자의 교육효과에 영향을 미치게 된다. 이에 본 연구는 원격교육에서 사용되는 콘텐츠의 품질을 분석함으로써 교육의 효과성을 높이기 위해 콘텐츠의 어떤 요소 품질을 개선해야 하는 가에 대한 시사점을 제공하고자 하였다.
즉, 전통적 개념의 원격교육 지원을 위한 콘텐츠(CD 등) 뿐만 아니라 인터넷 기반에서 상호작용성이 중요시되며, 교수-학습을 관리할 수 있는 물적 기반을 포함한 다양한 유형의 교육정보 및 자원에 대한 품질관리를 의미한다[11]. 이에 본 연구는 콘텐츠 품질관리를 원격교육에서 사용될 수 있도록 제작된 디지털 자료들의 교육적 효용을 높이기 위해 진행되는 일련의 관리체계라고 정의한다.
즉, 많은 연구들이 콘텐츠 품질 관리 도구 개발에 집중되었으며, 개발된 도구를 토대로 실제 평가를 진행하지는 않았다. 이에 본 연구는 현재 개발되어 사용되고 있는 콘텐츠 품질관리 도구로 콘텐츠를 평가해보고, 원격교육 콘텐츠의 품질 수준이 어느 정도 인지를 분석하고자 하는 목적을 가지고 있다. 평가관리 도구를 활용하여 콘텐츠를 평가한 실증 연구는 원격교육에서 교육의 효과성을 높이기 위해 콘텐츠들의 품질향상을 위해 어떤 요소를 개선해야 하는지에 대한 시사점을 제공할 수 있을 것이다.

제안 방법

둘째, 각 부문에서 각 요소별로 콘텐츠의 수준을 분석하였다.
평가는 매월 2회 진행하며, 과정 당 내용분과(18개 분야) 심사위원 3인, 교수설계분과 심사위원 2인이 심사를 진행한다. 심사는 개별 심사와 인터넷 심사를 원칙으로 하며, 심사결과는 적합, 조건부 적합, 부적합으로 구분한다. 그리고 적합의 경우에는 등급(A등급/B등급/C등급/D 등급)을 부여하고, 조건부 적합과 부적합의 경우에는 심의의견서를 제시하도록 하고 있다[27].
평가는 1팀이 4명으로 구성되어 진행하였으며, 최종 점수는 평균을 사용하였다. 콘텐츠 평가는 웹으로 진행되었으며, 정보통신산업진흥원의 평가 도구를 이용하여 평가 점수를 산출하였다.
한국직업능력개발원의 콘텐츠 평가는 다음과 같이 진행된다. 평가는 매월 2회 진행하며, 과정 당 내용분과(18개 분야) 심사위원 3인, 교수설계분과 심사위원 2인이 심사를 진행한다. 심사는 개별 심사와 인터넷 심사를 원칙으로 하며, 심사결과는 적합, 조건부 적합, 부적합으로 구분한다.

대상 데이터

교수설계 부문은 ‘요구분석’, ‘교수 설계’, ‘상호작용’, 그리고 ‘학습지원’에 대해 교수설계 전문가나 컨설턴트 3명이 평가를 진행한다.
그리고 ‘평가’와 ‘윤리성’ 부문은 교수설계 전문가나 컨설턴트 3명과 내용 전문가 2명, 총 5명이 평가를 진행한다.
첫째, 교수설계 전문가는 원격교육용 콘텐츠에 대한 설계 경력이 3년 이상이거나 원격교육용 콘텐츠 평가 경력이 2년 이상인 사람으로 선정하였다. 둘째, 내용 전문가는 해당 분야에서 3년 이상의 경력을 가지고 있는 사람을 선정하였다. 본 연구에 참여한 평가위원은 연구자들 이외에 15인이 참여하여 총 18명의 평가위원이 평가를 진행하였다.
둘째, 내용 전문가는 해당 분야에서 3년 이상의 경력을 가지고 있는 사람을 선정하였다. 본 연구에 참여한 평가위원은 연구자들 이외에 15인이 참여하여 총 18명의 평가위원이 평가를 진행하였다. 평가는 1팀이 4명으로 구성되어 진행하였으며, 최종 점수는 평균을 사용하였다.
2단계는 콘텐츠 선정이다. 원격교육용 콘텐츠 중, 직무 및 자격연수용으로 제작된 콘텐츠를 선정하였다. 콘텐츠는 이러닝연합회 소속 기관들의 콘텐츠 중 무선으로 58개의 콘텐츠를 추출하였다.
평가위원은 정보통신산업진흥원과 같이 많은 인원을 배정하지 못하고, 한국교육학술정보원에서와 유사한 방법을 선택하였다. 즉, 교수설계 전문가 2명, 내용 전문가 2명으로 4명이 진행하였다. 그러나 교수설계 전문가 중 1인, 내용 전문가 중 1인은 교수설계 부분과 내용 부분을 동시에 평가하도록 하였다.
첫째, 각 부문별로 각 기관들의 콘텐츠 수준이 어느 정도인지 58개의 콘텐츠를 분석하였다.
본 연구를 지원할 평가위원은 다음과 같은 방법으로 선정하였다. 첫째, 교수설계 전문가는 원격교육용 콘텐츠에 대한 설계 경력이 3년 이상이거나 원격교육용 콘텐츠 평가 경력이 2년 이상인 사람으로 선정하였다. 둘째, 내용 전문가는 해당 분야에서 3년 이상의 경력을 가지고 있는 사람을 선정하였다.
원격교육용 콘텐츠 중, 직무 및 자격연수용으로 제작된 콘텐츠를 선정하였다. 콘텐츠는 이러닝연합회 소속 기관들의 콘텐츠 중 무선으로 58개의 콘텐츠를 추출하였다. 3단계는 콘텐츠 평가를 위해 18명의 평가 위원 중 4명의 평가위원을 임의 추출하여, 배정하였다.
본 연구에 참여한 평가위원은 연구자들 이외에 15인이 참여하여 총 18명의 평가위원이 평가를 진행하였다. 평가는 1팀이 4명으로 구성되어 진행하였으며, 최종 점수는 평균을 사용하였다. 콘텐츠 평가는 웹으로 진행되었으며, 정보통신산업진흥원의 평가 도구를 이용하여 평가 점수를 산출하였다.

데이터처리

원격교육용 콘텐츠의 품질 수준이 어느 정도인지 평가해 보고자 한 본 연구는 SPSS PC+ 13.0 프로그램을 이용하여 분석하였다.

이론/모형

1단계는 평가도구 선정이다. 본 연구는 정보통신산업진흥원의 평가도구를 사용하였다. 왜냐하면 정보통신산업진흥원은 직무 및 자격연수 콘텐츠를 평가하기 때문에 보다 광범위하게 원격교육 콘텐츠를 품질관리하고 있는 기관이기 때문이다.

성능/효과

교수설계 부문의 품질분석 결과는 그림 6과 같으며, ‘학습 자료’ 요소가 79.60으로 가장 높은 품질을 나타내었고, ‘교수학습전략’ 요소가 78.48, ‘인터페이스’ 요소가 78.07, ‘화면구성’이 76.93으로 분석되었다.
둘째, 각 부문별로 어떤 요소들의 품질이 낮은지를 분석한 결과, 학습내용 부문에서는 ‘학습수준’이나 ‘학습내용 구성’ 요소가 낮은 품질을 나타내었다.
둘째, 한국직업능력개발원의 콘텐츠 품질관리이다. 2009년 10월 이전에는 ‘교수설계분과’에서 교수전략, 상호작용, 평가, 학습자원 설계, 기술 등에 대한 부분을 평가하였으며, 50점의 배점을 가지고 있었다[25].
정보통신산업진흥원은 70점을 기준으로 인증을 진행하지만, 모든 영역에서 70점을 넘어야 하기 때문에 실제적으로 평균 70점보다는 각 영역의 점수가 70이 넘어야 한다. 따라서 학습내용, 평가 그리고 교수설계 부문에 대한 품질분석 결과, 모든 부문에서 70점을 넘는 콘텐츠는 45개 나타났으며, 13개의 콘텐츠가 인증 점수보다 낮게 나타나 77.59%의 인증률을 나타내었다.
각 부문별로 구성요소들의 품질을 분석한 결과는 다음과 같다. 먼저 학습내용 부문 구성요소들의 품질 분석 결과, 학습목표는 83.05로 가장 높은 품질을 나타내었고, 학습수준이 적절하게 구성되었는가에 대한 요소가 80.20으로 다른 요소들에 비하여 낮은 품질을 나타내었다.
원격교육용 콘텐츠의 품질을 분석한 결과, 학습내용 부문의 품질이 81.20점으로 가장 높았으며, 평가 부문의 품질 점수는 79.89점, 교수설계 부문의 품질 점수가 76.06점 순으로 나타났다. 각 콘텐츠별 학습내용 부문의 품질분석 결과는 그림 1과 같다.
즉, 원격교육을 진행하기 위해서는 요구분석이 무엇보다 중요한 요소일 수 있으나, 현재 원격교육용 콘텐츠는 요구분석이 미진한 것으로 나타났다. 그리고 원격교육의 효과를 높일 수 있을 것으로 판단되는 ‘상호작용’이 낮게 나타났다는 것은 콘텐츠만을 통해서 학습이 이루어지는 원격교육의 효과를 높이기 위해 상호작용 부분을 더 강화할 필요가 있음을 보여주는 결과라 하겠다.
총 58개의 원격교육 콘텐츠 품질을 분석한 결과, 첫째, 학습내용 부문의 품질이 가장 높은 것으로 나타났으며, 평가, 교수설계 부문의 순으로 나타났다. 학습내용 부문은 전문적인 분야를 나타내는 것이기 때문에 원격교육의 교재와도 같은 역할을 한다.
평가 부문의 품질분석 점수는 그림 2와 같으며, 평가 부문 품질점수의 최대는 93.33점, 최저는 54.44점으로 나타났다. 그리고 인증 점수인 70점 이하는 5개의 콘텐츠로 분석되었다.
학습내용 부문의 품질이 가장 높은 콘텐츠는 92.05점, 최저는 59.83점으로 나타났다. 즉, 대부분의 콘텐츠들이 정보통신산업진흥원의 인증 점수인 70점이 넘을 정도의 수준을 유지하고 있었으며, 58개 중 4개는 70점 이하로 나타났다.

후속연구

그리고 상호작용은 원격교육의 효과를 높이는 데 결정적인 역할을 하는 요소임에도 불구하고[32,33] 낮은 품질을 보이고 있었다. 이러한 결과를 토대로 할 때, 원격교육의 효과를 높이기 위해서는 먼저 학습자나 내용 그리고 교수자에 대한 철저한 사전 분석과 더불어 학습이 진행되는 상황에서의 상호작용 부분 품질을 높이기 위한 노력이 지속되어야 할 것으로 보인다. 교수설계 부문은 사용자들의 교육내용에 대한 접근성과 관련된 것이기 때문에 학습내용을 학습하는 데 있어서 지원적인 역할을 보다 충실히 수행할 수 있는 콘텐츠를 개발할 필요가 있다.
이에 본 연구는 현재 개발되어 사용되고 있는 콘텐츠 품질관리 도구로 콘텐츠를 평가해보고, 원격교육 콘텐츠의 품질 수준이 어느 정도 인지를 분석하고자 하는 목적을 가지고 있다. 평가관리 도구를 활용하여 콘텐츠를 평가한 실증 연구는 원격교육에서 교육의 효과성을 높이기 위해 콘텐츠들의 품질향상을 위해 어떤 요소를 개선해야 하는지에 대한 시사점을 제공할 수 있을 것이다.

질의응답

핵심어	질문	논문에서 추출한 답변
	원격교육에서 교육의 품질을 관리하기 위한 노력은 일반적으로 콘텐츠에 국한되어 이루어진 이유는?	원격교육에서 교육의 품질을 관리하기 위한 노력은 일반적으로 콘텐츠에 국한되어 이루어졌다. 왜냐하면 원격교육을 진행하는 데 있어서 학습내용을 전달하는 것이 콘텐츠이므로 콘텐츠에 대한 품질관리가 학습내용에 대한 품질관리를 의미하기 때문이다. 따라서 콘텐츠 품질평가를 위한 도구 개발, 품질관리 시스템개발 그리고 관리 체계의 개발 등이 진행되었다[7,10,13-15].
	정보통신기술이 발달하면서 무엇을 바탕으로 원격교육이 확대되었나?	정보통신기술이 발달하면서 시공을 초월한 교육 기회의 확대, 교육 접근의 용이성, 교육비용 절감의 효과성, 자율적인 상호작용성을 바탕으로 한 원격교육이 확대되었다[1]. 모든 교육이 그렇듯이 교육에 대한 품질관리는 교육 본연의 목적을 달성하기 위해 필요한 노력이라 할 수 있다.
	국가에서는 원격 교육 정착 지원을 위한 콘텐츠 품질인증제의 확대 운영을 위해 2006년에 무엇을 도입하였는가?	그러나 품질관리에 대한 논의에도 불구하고 원격교육이 확대되면서 지속적으로 제기되고 있는 것은 양적 발전과 전망에 비해 질적 향상이나 그에 대한 노력이 미비하다는 것이었다[4,5]. 이에 따라 국가에서는 원격 교육 정착 지원을 위한 콘텐츠 품질인증제의 확대 운영을 위해 '04년 09월 이러닝 지원체제 종합발전방안을 시작으로, '06년 01월에 ｢이러닝 품질인증제｣를 도입하였다[8,11]. 그리고 '06년 5월에는 이러닝 종합품질관리체제 구축·운영 계획을 통하여 이러닝 전반의 품질관리에 주력하였다[12].

참고문헌 (33)

이수경, "웹기반 기업교육의 정책.제도 동향". 나일주, 임철일, 이인숙(편), 기업교육론, 학지사. 2003.
나일주, 정현미, "웹기반 가상교육 프로그램 설계를 위한 활동모형개발", 교육공학연구, 17(2), 27-52, 2001.
Liu, M, Gibby, S., Quiros, O., & Demps, E., "Challenges of being an instructional designer for new media development : A view from the practitioners. Journal of Educational Multimedia and Hypermedia, 11(3), 195-219, 2002.

상세보기
이주희, "사이버대학의 질관리를 위한 핵심영역과 평가 항목 규명", 이화여자대학교 대학원 박사학위논문, 2005.
임준철, "e-learning 활성화를 위한 민간부문의 역할. e-learning 중장기 발전을 위한 워크샵, 한국직업능력개발원, 2003.
오영훈, 장명희, 권성연, "직업능력개발 훈련 기관 및 과정평가- 인터넷통신훈련부문", 한국직업능력개발원. 2004
정영란, 장은정, "이러닝 코스의 수월성 확보를 위한 질관리 평가 준거 연구", 교육정보미디어연구, 10(2), 159-192, 2004.
김자미, 김종혜, 김홍래, 김용, 조경희, 이러닝 품질관리 연수교재, 한국교육학술정보원, 2007.
김자미, 김홍래, 김현철, 이러닝 통합품질인증 기반조성 연구, 정보통신산업진흥원, 2009.
안미리, 손경아, 김용, "e-러닝 콘텐츠 품질관리 기준안 개발 연구", 교육공학연구, 22(4), 171-193, 2006.
김용, 신성욱, 안상미, 김자미, 손경아, 전종호, e-러닝 품질관리 가이드라인, 한국교육학술정보원, 2006.
한국교육학술정보원, 2006 교육정보화백서, 한국교육학술정보원, 교육인적자원부, 2006.
김인숙, 유영만, "e-Learning 콘텐츠 품질관리지원시스템 개발", 교육정보미디어연구, 12(1), 107-130, 2006.
이재진, "이러닝 교수.학습의 질관리를 위한 평가 모형 및 준거 탐색", 한국홀리스틱교육학회지, 10(1), 75-91, 2006.
임재현, 김치수, "생명주기 기반 교육용 콘텐츠 질관리", 정보교육학회논문지, 11(4), 483-495, 2007.

원문보기 상세보기
손강렬, 임종태, "품질문제 요인분석을 통한 데이터 품질 개선방안 연구 : 국가 R&D 정보연계 방식 중심", 한국콘텐츠학회논문지, 9(1), 1-14, 2009.

원문보기 상세보기
이혜정, 박경선, "이러닝 콘텐츠 개발의 질관리를 위한 학습자 중심의 사용성 평가 방안 연구", 교육정보미디어연구, 15(3), 63-88, 2009.
나현미, 류성열, 김종배, "기업 e-Learning 품질 보증관리 개선 방안 연구", 한국 IT서비스 학회지, 6(3), 2007.

원문보기 상세보기
최경애, "교육기관 중심의 웹기반교육 질관리 방안 탐색", 한국교육, 30(2), 137-161, 2003.
Cardy, R. L. & Selvarajan, T. T. Management intervntions. In Neil Anderson, Deniz S. Ones, Handan Kepir Sinangil, & Chockalingam Viswesvaran. HAndbook of industrial, Work & Organizational Psychology. 2(18). 2001.
Crosby, P. B. Quality is free. New York: McGraw -Hill. 1979.
Crosby, P. B. Let s talk quality. New York: McGraw-Hill. 1989.
West-Burnhanm, J. & Davies, B. Quality management as a response to educational change. The annual meeting of the American Educational Research Association, New Orleans: LA. (ERIC Document Reproduction Service No. ED 373 443), 1994.
교육과학기술부.한국교육학술정보원, "2009 교육정보화 백서, 한국교육학술정보원, 2009.
이수경. "한국직업능력개발원 이러닝 질관리 시스템개요", 한국직업능력개발원. 2006.
정보통신산업진흥원, "이러닝 품질인증 평가기준 연구", 정보통신산업진흥원, 2008.
한국직업능력개발원, "원격교육 콘텐츠 인증현황",한국직업능력개발원, 2009.
김용, 김자미, 서정만, 우세철, 이영민, 이은정, "초.중등 이러닝 품질관리 가이드라인 Ver 2.0", 한국교육학술정보원, 2007.
Juran J M (ed) "Quality Control Handbook" 3rd ed. New York, McGraw-Hill, 1974
Johnson, P. L. ISO 9000 Meeting the New International Standards. McGraw-Hill, 2000.
Douglas N. Hales and Satya S. Chakravorty Implementation of Deming's style of quality management: An action research study in a plastics company (ARTICLE) International Journal of Production Economics, Volume 103, Issue 1, 131-148, 2006.

상세보기
Koohang, A., & D. Plessis, Jacques. "Architecting usability properties in the e-learning instructional design process", International Journal of e-learning, 3(3), 38-44. 2004.
Zhang, Dongsong. "Interactive multimedia - based e-learning: A study of effectiveness", American Journal of Distance Education, 19(3), 149-162.2005.

상세보기

저자의 다른 논문 :

표제어: PCR

동의어: Packet Collision Rate

용어 설명 출처 목록 (6)

용어 설명: PCR은 세균 특이성이 있는 primer를 이용하여 적은 수의 세균이 있을지라도 쉽게 검출할 수 있는 유용한 방법이며, 이를 이용하여 구강 내 치면세균막이나 타액에서 직접 세균을 검출할 수 있게 되었다[8].

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증