[논문]프로세스 마이닝을 활용한 온라인 교육 오픈 플랫폼 내 학습 패턴 분석 방법 개발

김태영; 김효민; 조민수

doi:10.13088/jiis.2023.29.2.285

프로세스 마이닝을 활용한 온라인 교육 오픈 플랫폼 내 학습 패턴 분석 방법 개발
Toward understanding learning patterns in an open online learning platform using process mining 원문보기

지능정보연구 = Journal of intelligence and information systems, v.29 no.2, 2023년, pp.285 - 301

김태영 (광운대학교 정보융합학부) , 김효민 (광운대학교 정보융합학부) , 조민수 (광운대학교 정보융합학부)

초록
AI-Helper

비대면 교육의 중요성 및 필요에 따른 수요가 증가함에 따라 국내외 온라인 교육 오픈 플랫폼이 활성화되고 있다. 본 플랫폼은 대학 등 교육 전문기관과 달리 학습자의 자율성이 높은 특징을 가지며 이에 따라 개인화된 학습 도구를 지원하기 위한 학습 행동 데이터의 분석 연구가 중요시 되고 있다. 실제적인 학습 행동을 이해하고 패턴을 도출하기 위하여 프로세스 마이닝이 다수 활용되었지만 온라인 교육 플랫폼과 같이 자기 관리형(Self-regulated) 환경에서의 학습 로그를 기반한 사례는 부족하다. 또한, 대부분 프로세스 모델 도출 등의 모델 관점에서의 접근이며 분석 결과의 실제적인 적용을 위한 개별 패턴 및 인스턴스 관점에서의 방법 제시는 미흡하다. 본 연구에서는 온라인 교육 오픈 플랫폼 내 학습 패턴을 파악하기 위하여 프로세스 마이닝을 활용한 분석 방법을 제시한다. 학습 패턴을 다각도로 분석하기 위하여 모델, 패턴, 인스턴스 관점에서의 분석 방법을 제시하며, 프로세스 모델 발견, 적합도 검사, 군집화 기법, 예측 알고리즘 등 다양한 기법을 활용한다. 본 방법은 국내 오픈 교육 플랫폼 내 기계학습 관련 강좌의 학습 로그를 추출하여 분석하였다. 분석 결과 온라인 강의의 특성에 맞게 비구조화된 프로세스 모델을 도출할 수 있었으며 구체적으로 한 개의 표준 학습 패턴과 세 개의 이상 학습 패턴으로 세분화할 수 있었다. 또한, 인스턴스별 패턴 분류 예측 모델을 도출한 결과 전체 흐름 중 초기 30%의 흐름을 바탕으로 예측하였을 때 0.86의 분류 정확도를 보였다. 본 연구는 프로세스 마이닝을 활용하여 학습자의 패턴을 체계적으로 분석한다는 점에서 기여점을 가진다.

Abstract ▼ AI-Helper

Due to the increasing demand and importance of non-face-to-face education, open online learning platforms are getting interests both domestically and internationally. These platforms exhibit different characteristics from online courses by universities and other educational institutions. In particular, students engaged in these platforms can receive more learner autonomy, and the development of tools to assist learning is required. From the past, researchers have attempted to utilize process mining to understand realistic study behaviors and derive learning patterns. However, it has a deficiency to employ it to the open online learning platforms. Moreover, existing research has primarily focused on the process model perspective, including process model discovery, but lacks a method for the process pattern and instance perspectives. In this study, we propose a method to identify learning patterns within an open online learning platform using process mining techniques. To achieve this, we suggest three different viewpoints, e.g., model-level, variant-level, and instance-level, to comprehend the learning patterns, and various techniques are employed, such as process discovery, conformance checking, autoencoder-based clustering, and predictive approaches. To validate this method, we collected a learning log of machine learning-related courses on a domestic open education platform. The results unveiled a spaghetti-like process model that can be differentiated into a standard learning pattern and three abnormal patterns. Furthermore, as a result of deriving a pattern classification model, our model achieved a high accuracy of 0.86 when predicting the pattern of instances based on the initial 30% of the entire flow. This study contributes to systematically analyze learners' patterns using process mining.

주제어

표/그림 (12)

그림 <그림 1> LMS 로그 기반 프로세스 분석 절차
표 <표 1> LMS 이벤트 로그 데이터 예시
그림 <그림 2> Autoencoder-based Trace clustering
그림 <그림 3> Fuzzy Miner 기반 프로세스 모델
표 <표 2> 연구 대상 로그 요약
그림 <그림 4> 군집화 분석에 대한 시각화 결과
표 <표 3> 강의 별 시작, 종료 빈도 비율 (3% 이상)
그림 <그림 5> 군집 별 강의 완료 비율
표 <표 4> 각 군집별 교수자 정의 모델과의 유사도 분석 결과
그림 <그림 6> 표준 패턴 기반 모델
그림 <그림 7> 이상 패턴 기반 모델
표 <표 5> 각 학습자별 표준/이상 패턴 분류 모델 구축 결과

참고문헌 (33)

권영옥. (2013). 빅데이터를 활용한 맞춤형 교육？서비스 활성화 방안연구. 지능정보연구, 19(2),？87-100.
정준희. (2012). 통계적 접근법을 기초로 하는 지능형？교육 지원 시스템. 지능정보연구, 18(1), 109-123.
강영식, 정진우, 심선영. (2023). RPA 로그 마이닝？기반 프로세스 자동화 현황 분석 - 중소기업？대상 실증 연구. 지능정보연구, 29(1), 265-288.
김혜경, 배성아. (2019). Felder-Silverman 학습양식에 따른 영어 튜터링 프로그램의 튜터와？튜티의 학습성취도와 만족도 간의 관계 연구.？교양교육연구, 3(2), 115-140.
손세창, 윤한영. (2022). 포스트 코로나19 시대？공항의 디지털 트랜스포메이션을 통한 공항？운영에서 혁신적 비즈니스 모델 적용 연구.？한국산학기술학회논문지, 23(4), 483-492.
허묘연. (2020). 언택트 교육의 시대: 온라인 교육을 위한 준비. 차세대컨버전스정보서비스기술논문지, 9(3), 315-325.
Lockyer, L., Heathcote, E., & Dawson, S. (2013).？Informing pedagogical action: Aligning learning？analytics with learning design. American？Behavioral Scientist, 57(10), 1439-1459.

상세보기
Graf, S., Viola, S.R. & Leo, T. (2007). In-Depth？Analysis of the Felder-Silverman Learning Style？Dimensions Journal of Research on Technology？in Education, 40(1), 79-93. https://doi.org/10.1080/15391523.2007.10782498

상세보기
Bogarin, A., Cerezo, R. & Romero, C. (2017) A？survey on educational process mining WIREs？Data Mining and Knowledge Discovery, 8(1).？https://doi.org/10.1002/widm.1230

상세보기
Siemens, G. (2013). Learning Analytics: The Emergence？of a Discipline American Behavioral Scientist,？57(10), 1380-1400

상세보기
Gasevic, D., Dawson, S., Rogers, T. & Gasevic, D.？(2016). Learning analytics should not promote？one size fits all: The effects of instructional？conditions in predicting academic success Internet？and Higher Education, 68-84. https://doi.org/10.1016/j.iheduc.2015.10.002

상세보기
Mukala, P., Buijs, J., Leemans, M. & Van Der？Aalst, W. (2015). Exploring Students' Learning？Behaviour in MOOCs Using Process Mining.？BPM Reports,1510, Eindhoven University of？Technology, Eindhoven, The Netherlands. https://research.tue.nl/nl/publications/exploring-students-learning-behaviour-in-moocs-using-process-mini
Hachicha, W., Ghorbel, L., Champagnat, R., Zayani,？C.A. & Amous, I. (2021). Using Process Mining？for Learning Resource Recommendation: A？Moodle Case Study. Procedia Computer Science,？853-862. https://doi.org/10.1016/j.procs.2021.08.088

상세보기
Schoor, C. & Bannert, M. (2012). Exploring regulatory？processes during a computer-supported collaborative？learning task using process mining Computers？in Human Behavior, 1321-1331. https://doi.org/10.1016/j.chb.2012.02.016
Juhanak, L., Zounek, J. & Rohlikova, L. (2019).？Using process mining to analyze students'？quiz-taking behavior patterns in a learning？management system Computers in Human？Behavior, 496-506. https://doi.org/10.1016/j.chb.2017.12.015

상세보기
Van Der Aalst, W. (2016). Process mining: data？science in action (Vol. 2). Heidelberg: Springer.
Augusto, A., Conforti, R., Dumas, M., La Rosa, M., Maggi, F. M., Marrella, A., ... & Soo, A.？(2018). Automated discovery of process models？from event logs: review and benchmark.？IEEE transactions on knowledge and data？engineering, 31(4), 686-705.
Cho, M., Song, M., Comuzzi, M., & Yoo, S. (2017).？Evaluating the effect of best practices for？business process redesign: An evidence-based？approach based on process mining techniques.？Decision Support Systems, 104, 92-103.

상세보기
Cardoso, J., Mendling, J., Neumann, G., & Reijers,？H. A. (2006, September). A discourse on？complexity of process models. In Business？process management workshops (Vol. 4103,？pp. 117-128).
McCoy, C. & Shih P. C. (2016). Teachers as？Producers of Data Analytics: A Case Study of？a Teacher Focused Educational Data Science？Program, Journal of Learning Analytics, 3(3),？193-214.

상세보기
Black, E. W., Dawson, K., & Priem, J. (2008).？Data for free: Using LMS activity logs to？measure community in online courses. The？Internet and Higher Education, 11(2), 65-70.
Muslim, A., Chatti, M. A., & Guesmi, M. (2020). Open？learning analytics: a systematic literature review？and future perspectives. Artificial Intelligence？Supported Educational Technologies, 3-29.
Wang, Y., Mu, C., Li, X., & Yang, Y. (2019,？August). An Applied Research on Big Data？Analysis and Mining Technology in Education.？In 2019 International Conference on Sensing,？Diagnostics, Prognostics, and Control (SDPC)？(pp. 116-120). IEEE.
Chen, L., Lu, M., Goda, Y., & Yamada, M. (2019).？Design of Learning Analytics Dashboard？Supporting Metacognition. International Association？for Development of the Information Society.
Fleur, D. S., van den Bos, W., & Bredeweg, B. (2020).？Learning analytics dashboard for motivation？and performance. In Intelligent Tutoring Systems:？16th International Conference, ITS 2020, Athens,？Greece, June 8-12, 2020, Proceedings 16？(pp. 411-419). Springer International Publishing.
Baneres, D., Rodriguez-Gonzalez, M. E., & Serra,？M. (2019). An early feedback prediction？system for learners at-risk within a first-year？higher education course. IEEE Transactions？on Learning Technologies, 12(2), 249-263.

상세보기
Han, J., Kim, K. H., Rhee, W., & Cho, Y. H.？(2021). Learning analytics dashboards for？adaptive support in face-to-face collaborative？argumentation. Computers & Education, 163, 104041.
Kokoc, M., & Altun, A. (2021). Effects of learner？interaction with learning dashboards on academic？performance in an e-learning environment.？Behaviour & Information Technology, 40(2),？161-175.

상세보기
Khalil, M., & Ebner, M. (2017). Clustering patterns？of engagement in Massive Open Online Courses？(MOOCs): the use of learning analytics to reveal？student categories. Journal of computing in？higher education, 29, 114-132.

상세보기
Viberg, O., Hatakka, M., Balter, O., & Mavroudi,？A. (2018). The current landscape of learning？analytics in higher education. Computers in？human behavior, 89, 98-110.

상세보기
Trcka, N., & Pechenizkiy, M. (2009, November).？From local patterns to global models: Towards？domain driven educational process mining. In？2009 Ninth international conference on intelligent？systems design and applications (pp. 1114-1119).？IEEE.
Bannert, M., Reimann, P., & Sonnenberg, C. (2014).？Process mining techniques for analysing patterns？and strategies in students' self-regulated learning.？Metacognition and learning, 9, 161-185.

상세보기
Cairns, A. H., Gueni, B., Fhima, M., Cairns, A.,？David, S., & Khelifa, N. (2014, July). Towards？custom-designed professional training contents？and curriculums through educational process？mining. In The fourth international conference？on advances in information mining and？management (pp. 53-58).

표제어: PCR

동의어: Packet Collision Rate

용어 설명 출처 목록 (6)

용어 설명: PCR은 세균 특이성이 있는 primer를 이용하여 적은 수의 세균이 있을지라도 쉽게 검출할 수 있는 유용한 방법이며, 이를 이용하여 구강 내 치면세균막이나 타액에서 직접 세균을 검출할 수 있게 되었다[8].

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증