[논문]VR 기반의 상지 재활 훈련용 멀티플레이 콘텐츠

신성욱; 이혁민; 문호상; 정성택

doi:10.7236/jiibc.2019.19.3.115

VR 기반의 상지 재활 훈련용 멀티플레이 콘텐츠
Multi-player Contents for Upper Limb Rehabilitation based on VR 원문보기

The journal of the institute of internet, broadcasting and communication : JIIBC, v.19 no.3, 2019년, pp.115 - 120

신성욱 (한국산업기술대학교 컴퓨터공학과) , 이혁민 (한국산업기술대학교 컴퓨터공학과) , 문호상 (한국산업기술대학교 컴퓨터공학과) , 정성택 (한국산업기술대학교 컴퓨터공학과)

초록
AI-Helper

뇌졸중 후 편마비(Hemiplegic) 환자들의 상지기능 저하는 손을 많이 쓰는 일상생활 수행에 있어서 신체적 동작뿐만 아니라 심리적인 불편함이 매우 크다. 본 논문에서는 편마비 환자들의 상지기능 개선을 위하여 자체 제작한 상지 재활 보조장치를 이용하였다. 이 장치는 팔이 움직일 수 있는 관절가동범위(Range Of Motion)와 손의 악력 크기를 사용하여 훈련 콘텐츠를 수행할 수 있다. 이 장치를 이용한 훈련 콘텐츠는 환자의 흥미와 능동적인 참여를 유도하기 위해 VR(Virtual Reality)로 구현되었으며, 환자 혼자서 훈련하는 심리적 부담을 덜어주기 위해 멀티플레이 환경으로 구성하여 환자의 재활훈련에 간병인이 함께 참여할 수 있도록 하였다. 본 연구에서 제작된 장치와 훈련 콘텐츠를 사용하여 손의 악력 크기와 팔의 관절가동범위의 변화를 정량적으로 측정하고 시각적으로 보여줌으로써 환자나 간병인이 쉽게 상지기능 개선정도를 확인할 수 있는 장점이 있다.

Abstract ▼ AI-Helper

Hemiplegic patients who suffered from a stroke struggle with a deterioration in upper limb functions, which can both be psychologically and physically discomforting; this can also limit patients' daily tasks involving any upper limb motions. In this study, we developed an assistive device for hemiplegic patients to improve their upper limb functions. It was manufactured to train patients by using their grip strength and the range of motion of the arm. Furthermore, we produced game contents in virtual reality to induce users' immersion and interaction. It was configured as a multi-player game to help ease the mental burden of receiving the training alone, hence allowing the patient and the caregiver to join the rehabilitation training simultaneously. The assistive device and game contents developed in this study enables patients and caregivers to easily check the degree of improvements in upper limb function by viewing quantitative analysis and visualized results.

주제어

표/그림 (7)

그림 그림 1. 훈련 보조 장치 및 손의 악력 측정을 위한 PCB 모듈 Fig. 1. Assistive Devices & PCB Module to Measure Hand Grip Strength
그림 그림 2. 콘텐츠 훈련 흐름도 Fig. 2. Flow chart of Training Contents
그림 그림 3. 악력 측정용 페그보드(a), 관절가동범위 측정용 페그보드 (b), 악력 및 관절가동범위 측정용 페그보드(c) Fig. 3. Pegboards for measuring grip strength (a), Pegboards for measuring ROM (b), Pegboards for measuring grip strength and ROM (c)
그림 그림 4. 페그보드 이동 경로 Fig. 4. Hand Route of Peg Board
그림 그림 5. 페그보드 측정 결과 세분화 Fig. 5. Details of pegboard measurement results
그림 그림 6. 에어하키 실행 중 등장하는 상자 Fig. 6. Random Box of Air Hockey
그림 그림 7. 에어하키 득점화면 Fig. 7. Score Screen of Air Hockey

AI 본문요약
AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

문제 정의

재활훈련의 효과를 향상시키기 위하여 VR 기반으로 환자의 악력과 팔의 관절가동범위를 측정할 수 있는 페그보드 콘텐츠와 간병인과 함께 훈련할 수 있는 에어하키 콘텐츠로 제작하였다. VR기반의 기능성 게임 콘텐츠를 구현한 것은 환자에게 특정 감각을 자극시켜 몰입을 유도시켜주며 이를 통해 훈련에 대한 높은 흥미와 동기 부여를 제공하고자 하였다. 또한, 가상 환경 내에서의 사회적 상호 작용을 통해 재활 훈련의 효과를 극대화 시킬 수 있도록 간병인이나 가족, 일반인 등과 함께 멀티플레이 게임이 가능하도록 구현하였다.
따라서 본 논문에서는 편마비 환자들이 VR 환경에서 손과 팔을 동작하는 데 겪는 어려움을 감소시키기 위하여 보조 장치를 제작하고, 이를 사용한 HMD 기반의 콘텐츠를 개발하였다. 콘텐츠들은 환자의 손의 악력과 팔의 관절가동범위를 측정할 수 있는 페그보드 콘텐츠와 팔꿈치와 어깨의 움직임 훈련이 가능한 에어하키 콘텐츠를 구현하였다.
본 논문은 뇌졸중으로 인한 편마비 환자의 상지 재활 훈련을 위한 보조장치와 이를 활용한 VR 기반의 게임 콘텐츠를 제작하였다. 보조장치는 HTC사의 VIVE와 고무 튜브 및 공기압 센서를 이용한 악력 측정 모듈로 구성하여 환자의 악력과 팔의 관절가동범위의 정량적인 측정이 가능하도록 하였다.

제안 방법

. 그래서 본 논문에서는 굴곡 동작보다 신전 동작을 많이 사용하는 실제 에어하키 게임을 기반으로 훈련 콘텐츠를 설계하였으며, 가족이나 간병인이 함께 훈련에 참여할 수 있도록 VR 기반의 멀티플 레이 환경을 구성하였다.
따라서 본 논문에서는 치료사의 도움 없이 손의 악력 및 팔의 관절가동범위의 측정이 가능한 VR기반의 페그 보드 콘텐츠를 그림 3과 같이 구현하였다. 콘텐츠에서 페그가 제시되는 방향은 환측 부위에 따라 왼쪽 또는 오른쪽으로 설정하여 옮기는 방향을 선택할 수 있도록 하였다.
VR기반의 기능성 게임 콘텐츠를 구현한 것은 환자에게 특정 감각을 자극시켜 몰입을 유도시켜주며 이를 통해 훈련에 대한 높은 흥미와 동기 부여를 제공하고자 하였다. 또한, 가상 환경 내에서의 사회적 상호 작용을 통해 재활 훈련의 효과를 극대화 시킬 수 있도록 간병인이나 가족, 일반인 등과 함께 멀티플레이 게임이 가능하도록 구현하였다. 멀티플레이 콘텐츠 수행을 위해서 환자와 정상인들과의 동등한 수준에서 경쟁할 수 있도록 환자의 악력 및 관절가동범위를 측정하여 적절한 보정을 통해 훈련과 도움간의 균형을 유지 시켜 경쟁 심리 유도와 흥미를 유발함으로서 보다 재활 훈련에 적극적으로 참여 할 수 있도록 하였다.
그래서 환자는 자신의 골대를 방어하고 움직이는 퍽을 맞춰 상대 골대에 넣음으로써 팔꿈치와 어깨의 결합된 움직임을 통해 상지훈련이 이루어진다^[17]. 또한, 게임적인 요소로 게임 도중 상자가 임의의 위치에 나타나도록 하였으며 손의 악력을 증가시킬 때 공의 속도도 이에 비례하여 더 빠르게 움직이도록 하였다. 퍽으로 상자를 맞추면 퍽이 2개로 증가하므로 팔의 정밀한 움직임과 순발력을 훈련할 수 있으며 이에 대한 에어하키 콘텐츠를 그림 6에서 보여주고 있다.
. 또한, 악력은 국내 60대 이상의 평균 악력이 약 25psi인 것을 고려하여 최대 50psi 까지 측정 가능하도록 하였으며^[11-12], 보조 장치의 높낮이 조절을 통해 환자의 체격에 따라 편안한 자세로 콘텐츠를 수행할 수 있도록 하였다.
VIVE Controller를 통해 측정되는 보조 장치의 이동거리 및 회전각은 콘텐츠 수행에 필요한 값으로 이용 되거나 훈련 효과에 대한 정량적인 향상도 분석으로 사용된다. 또한, 편마비 환자들은 손을 쥐는 힘이 약하므로 가볍게 쥐는 동작을 통해 악력의 변화를 측정하고 훈련할 수 있도록 고무튜브와 압력센서를 연결하였다.
멀티플레이 콘텐츠 수행을 위해서 환자와 정상인들과의 동등한 수준에서 경쟁할 수 있도록 환자의 악력 및 관절가동범위를 측정하여 적절한 보정을 통해 훈련과 도움간의 균형을 유지 시켜 경쟁 심리 유도와 흥미를 유발함으로서 보다 재활 훈련에 적극적으로 참여 할 수 있도록 하였다.
일반적으로 편마비 환자들은 근력 저하 및 근육의 공동운동(Synergy) 등으로 팔을 움직이거나 물건을 움켜쥐는 것이 어렵기 때문에 보조 장치를 제작하여 간병인과 함께 VR 환경에서 재활 훈련 콘텐츠를 수행할 수 있도록 하였다. 보조 장치는 상지 이동 경로와 관절가동범위를 측정하기 위하여 HTC사의 VIVE와 연동하였고, 손의 악력을 측정하기 위해 고무 튜브와 연결된 공기압 센서를 이용한 악력 측정 모듈로 구성하여 그림 1에 나타냈다. VIVE Controller를 통해 측정되는 보조 장치의 이동거리 및 회전각은 콘텐츠 수행에 필요한 값으로 이용 되거나 훈련 효과에 대한 정량적인 향상도 분석으로 사용된다.
본 논문은 뇌졸중으로 인한 편마비 환자의 상지 재활 훈련을 위한 보조장치와 이를 활용한 VR 기반의 게임 콘텐츠를 제작하였다. 보조장치는 HTC사의 VIVE와 고무 튜브 및 공기압 센서를 이용한 악력 측정 모듈로 구성하여 환자의 악력과 팔의 관절가동범위의 정량적인 측정이 가능하도록 하였다.
재활훈련의 효과를 향상시키기 위하여 VR 기반으로 환자의 악력과 팔의 관절가동범위를 측정할 수 있는 페그보드 콘텐츠와 간병인과 함께 훈련할 수 있는 에어하키 콘텐츠로 제작하였다. VR기반의 기능성 게임 콘텐츠를 구현한 것은 환자에게 특정 감각을 자극시켜 몰입을 유도시켜주며 이를 통해 훈련에 대한 높은 흥미와 동기 부여를 제공하고자 하였다.
따라서 본 논문에서는 편마비 환자들이 VR 환경에서 손과 팔을 동작하는 데 겪는 어려움을 감소시키기 위하여 보조 장치를 제작하고, 이를 사용한 HMD 기반의 콘텐츠를 개발하였다. 콘텐츠들은 환자의 손의 악력과 팔의 관절가동범위를 측정할 수 있는 페그보드 콘텐츠와 팔꿈치와 어깨의 움직임 훈련이 가능한 에어하키 콘텐츠를 구현하였다. 특히, 에어하키 콘텐츠는 환자가 재활 훈련을 진행하는 동안 느끼는 사회적 고립감을 최소화하고 능동적인 재활 훈련 참여를 유도할 수 있도록 가족이나 치료사가 함께 상호 작용하여 훈련 할 수 있는 멀티플레이 환경으로 구성하였다.
따라서 본 논문에서는 치료사의 도움 없이 손의 악력 및 팔의 관절가동범위의 측정이 가능한 VR기반의 페그 보드 콘텐츠를 그림 3과 같이 구현하였다. 콘텐츠에서 페그가 제시되는 방향은 환측 부위에 따라 왼쪽 또는 오른쪽으로 설정하여 옮기는 방향을 선택할 수 있도록 하였다.
환자의 악력은 화면 우측에 실시간으로 표시되는 악력 게이지를 통해 확인할 수 있으며, 퍽이 손에 닿지 않는 위치에서 멈추게 될 경우, 컨트롤러의 터치패드 우측버튼을 누르면 사용자 정면에 퍽이 재배치되도록 하였다. 퍽을 상대방의 골대에 넣을 시 그림 7에서 보여주는 효과와 함께 1점을 획득하며 실행 화면 중단에 있는 점수가 올라가게 되고, 10점을 먼저 획득하면 훈련이 종료된다.
VR환경의 페그보드 콘텐츠에서는 사용자가 페그를 옮기는 동안 관절가동범위와 악력이 측정되며, 이에 대한 결과 값들은 에어하키 콘텐츠 수행 시 필요한 파라미터로 사용된다. 환자의 파라미터들은 간병인들에 비해 낮은 값들을 가지기 때문에 간병인의 실제 동작 범위에 비례 하여 환자의 파라미터들을 증가시키는 매핑 과정을 거친 후 간병인과 동등한 수준에서 에어하키 콘텐츠를 수행할 수 있도록 하였다. 이것은 환자가 간병인과 함께 콘텐츠를 수행하는 동안 관절 가동범위와 악력 차이로 인한 불균형성을 적절한 보정을 통해 이질감이 느껴지지 않도록 하기 위한 것이다.

대상 데이터

본 논문에서 구현한 콘텐츠는 환자의 관절가동범위와 악력을 측정하기 위한 페그보드 콘텐츠와 측정된 결과를 보정하여 간병인과 함께 훈련할 수 있는 에어하키 콘텐츠로 구성되어 있다. 보조 장치를 사용한 훈련은 그림 2에서 보여주는 순서로 수행된다.

후속연구

향후 게임 종류의 다양화를 통해 보다 다양한 환경에서 재활 훈련을 수행할 수 있도록 하며 환자의 현재 상태에 맞춰 수행해야 할 콘텐츠를 추천해주거나 환자의 개선 정도에 따라 VR 환경에서의 보정이 가능한 맞춤형 VR 기능성 게임 연구가 필요할 것이다. 또한, 실제 환자를 대상으로 임상 시험이 가능한 병원과 연계한 실험을 통하여 확인해야 할 것이다.
향후 게임 종류의 다양화를 통해 보다 다양한 환경에서 재활 훈련을 수행할 수 있도록 하며 환자의 현재 상태에 맞춰 수행해야 할 콘텐츠를 추천해주거나 환자의 개선 정도에 따라 VR 환경에서의 보정이 가능한 맞춤형 VR 기능성 게임 연구가 필요할 것이다. 또한, 실제 환자를 대상으로 임상 시험이 가능한 병원과 연계한 실험을 통하여 확인해야 할 것이다.

질의응답

핵심어	질문	논문에서 추출한 답변
	편마비란?	최근 평균 수명의 연장으로 뇌졸중 환자의 발병률이 높아짐에 따라, 비정상적인 근육긴장도로 인해 뇌손상 측의 팔다리 또는 안면이 마비되는 편마비환자들이 증가하고 있다[1-2] . 특히, 상지기능의 장애를 동반한 편마비 환자들은 일상생활 수행에서 손과 팔을 많이 사용하기 때문에 신체적, 심리적인 불편함이 더 크다[3-4] .
	일반적인 상지 재활치료 방법으로는 어떤 것들이 있는가?	일반적인 상지 재활치료 방법으로는 건측 제한 운동 치료법(Constraint-induced Movement Therapy), 거울 치료법(Mirror Therapy), 기능적 전기 자극법 (Functional Electrical Stimulation) 등이 있지만, 이와 같은 방법들은 단순 반복적인 훈련으로 환자들의 능동적인 재활 참여를 기대할 수 없으며, 중도에 포기하는 경향이 있다[7]. 그래서 재활 훈련이 신체적 기능 및 환자의 집중력과 참여도를 증가시킬 수 있도록 HMD(Head Mounted Display)를 이용한 VR 기능성 게임이 많이 연구되고 있다[8].
	상지 재활 보조장치를 이용하여 무엇을 수행할 수 있는가?	본 논문에서는 편마비 환자들의 상지기능 개선을 위하여 자체 제작한 상지 재활 보조장치를 이용하였다. 이 장치는 팔이 움직일 수 있는 관절가동범위(Range Of Motion)와 손의 악력 크기를 사용하여 훈련 콘텐츠를 수행할 수 있다. 이 장치를 이용한 훈련 콘텐츠는 환자의 흥미와 능동적인 참여를 유도하기 위해 VR(Virtual Reality)로 구현되었으며, 환자 혼자서 훈련하는 심리적 부담을 덜어주기 위해 멀티플레이 환경으로 구성하여 환자의 재활훈련에 간병인이 함께 참여할 수 있도록 하였다.

참고문헌 (17)

S. Y. Oh and J. S. Lee, "Hemiplegic experience after stroke among middle aged man", Journal of the Korea Academia-Industrial cooperation society, Vol. 17, No. 5, pp. 582-593, May 2016. DOI: http://dx.doi.org/10.5762/KAIS.2016.17.5.582
S. W. Shin, S. H. Jeong, S. T. Chung and C. J. Lim, "Balance ball controller and Rehabilitation Contents Development using Smart Multisensor", Journal of The Korean Society for Computer Gamey, Vol. 27, No. 3, pp. 135-141, Sep 2014. DOI: http://db.koreascholar.com/article.aspx?code33822
S. R. Ma, "The Effects of Theratainment Task Oriented Upper Limb Motor Task on Muscle Tone and Upper Extremity Function in Stroke Patients over 65 Years", Journal of the Korea Entertainment Industry Association, Vol. 11, No. 7, pp. 281-288, Oct 2017. DOI: http://dx.doi.org/10.21184/jkeia.2017.10.11.7.335
J. W. Choi, S. W. Shin, J. Y. An and S. Y. Chung, "A Comparison of Multi-finger Motor Ability on Visual Reaction", The Journal of KIIT, Vol. 13, No. 11, pp. 97-104, Nov 2015. DOI: 10.14801/jkiit.2015.13.11.97
E. J. Yang, H. J. Kim, H. S. Ahn and E. H. Lee, "The Effect of Early Upper Extremities Passive Exercise on the Hand Edema and Upper Spasticity of the Hemiplegia Patient after Stroke", Journal of Korean Clinical Nursing Research, Vol. 12, No. 1, pp. 147-157, Aug. 2006.
Y. I. Choi and S. H. Lee. "The Effects of Complex Exercise Program for Upper Extremity Function and Balance Proficiency in Person With Stroke: A Case-Study", Journal of the Korea Academia-Industrial cooperation Society(JKAIS), Vol. 11, No. 11, pp. 4374-4381, Nov 2010. DOI: https://doi.org/10.5762/KAIS.2010.11.11.4374

원문보기 상세보기
J. H. Ku, H. J. Im, and Y. J. Kang, "Upper Extremity Rehabilitation using Virtual Reality after Stroke", Brain & NeuroRehabilitation, Vol. 7, No. 1, pp. 30-38, Mar 2014. DOI: http://dx.doi.org/10.12786/bn.2014.7.1.30

상세보기
Chen, Donglin, Hao Liu, and Zhigang Ren. "Application of Wearable Device HTC VIVE in Upper Limb Rehabilitation Training", Electronic and Automation Control Conference, pp 1460-1468, May 2018. DOI: http://10.1109/IMCEC.2018.8469540
K. Y. Lee, K. Y. Sohng, "A Study on the Degree of Burden and Depression in Family Caregivers of Patients with Stroke", Journal of Korean Academy of Nursing, Vol. 26, No. 4, pp. 853-867, Dec 1996.
D. M. Morris, G. Uswatte, J. E. Crago, E. W. Cook III and E. Taub, "The reliability of the wolf motor function test for assessing upper extremity function after stroke", Archives of physical medicine and rehabilitation, Vol. 82, No. 6, pp. 750-755. Jun 2001. DOI: https://doi.org/10.1053/apmr.2001.23183

상세보기
G. U. Jeong, J. Y. Baek and S. A. Lee, "Effect of Functional Activities according to posture change on Upper Extremity Function and Activities Daily Living in the stroke patients", Journal of Special Education & Rehabilitation Science, Vol. 51, No.1, pp. 231-251, May, 2012
Kim Jogn Im, So Hee Young, Kim Hyun Li, "Physiological Parameters Related to Health of The Elderly", Journal of Korean Public Health Nursing, Vol. 14, No. 2, pp. 271-280, Sep 2000.
M. Maier, B. R. Ballester, E. Duarte, A. Duff and P. F. Verschure, "Social integration of stroke patients through the multiplayer rehabilitation gaming system", In International Conference on Serious Games, Vol. 8395, pp. 100-114, Apr. 2014 DOI: https://doi.org/10.1007/978-3-319-05972-3_12
H. H. Choi, M. C. Ryu, Y. S. Yang, J. J. Kim and N. G. Kim, "Pegboard Evaluation Automation Utilizing RFID System for Telerehabilitation", Institute of Control, Robotics and Systems, Vol. 13, No. 12, pp. 1192-1197, Dec 2007. DOI: https://doi.org/10.5302/j.icros.2007.13.12.1192
J. C. Martins, L. T. Aguiar, E. M. Lara, L. F. Teixeira-Salmela, and C. D. Faria, "Assessment of grip strength with the modified sphygmomanometer test: association between upper limb global strength and motor function", Brazilian journal of physical therapy AHEAD, Vol. 19, No. 6, pp. 498-506, May 2015. DOI: https://doi.org/10.1590/bjpt-rbf.2014.0118

상세보기
W. K. Song and J. Y. Jeong, "Application to Video Game for Reaching with Upper Extremity Exercise Device", Rehabilitation Engineering And Assistive Technology Society of Korea, Vol. 2015, No. 11, pp. 85-87, Nov 2015.
J. Nirme, A. Duff and P. F. Verschure, "Adaptive rehabilitation gaming system: on-line individualization of stroke rehabilitation", In Engineering in Medicine and Biology Society, pp. 6749-6752, Sept 2011. DOI: https://10.1109/IEMBS.2011.6091665

저자의 다른 논문 :

LOADING...

표제어: PCR

동의어: Packet Collision Rate

용어 설명 출처 목록 (6)

용어 설명: PCR은 세균 특이성이 있는 primer를 이용하여 적은 수의 세균이 있을지라도 쉽게 검출할 수 있는 유용한 방법이며, 이를 이용하여 구강 내 치면세균막이나 타액에서 직접 세균을 검출할 수 있게 되었다[8].

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증