초록 ▼

본 발명에 따른 음악과 춤의 상관관계를 학습하여 춤을 추는 로봇은, 사람형상을 하여 사람의 각 관절에 해당하는 부위를 모터(10)로 제어하여 춤을 추도록 할 수 있는 로봇(1)에 있어서, 음악을 입력받는 마이크(100); 음악과 춤의 상관관계를 학습한 데이터가 저장된 데이터저장부(200); 상기 데이터저장부(200)와 유, 무선 통신하여 음악이나 춤 영상 데이터를 입력하여 상기 데이터저장부(200)에 저장될 수 있도록 하는 데이터입력부(300) 및 상기 모터(10), 상기 마이크(100) 및 상기 데이터저장부(200)와 연결되어 상

본 발명에 따른 음악과 춤의 상관관계를 학습하여 춤을 추는 로봇은, 사람형상을 하여 사람의 각 관절에 해당하는 부위를 모터(10)로 제어하여 춤을 추도록 할 수 있는 로봇(1)에 있어서, 음악을 입력받는 마이크(100); 음악과 춤의 상관관계를 학습한 데이터가 저장된 데이터저장부(200); 상기 데이터저장부(200)와 유, 무선 통신하여 음악이나 춤 영상 데이터를 입력하여 상기 데이터저장부(200)에 저장될 수 있도록 하는 데이터입력부(300) 및 상기 모터(10), 상기 마이크(100) 및 상기 데이터저장부(200)와 연결되어 상기 마이크(100)로부터 입력받은 음악에 맞추어 춤을 추도록 제어하는 제어부(400)를 포함하는 것을 특징으로 한다.

대표청구항 ▼

사람 형상을 하여 사람의 각 관절에 해당하는 부위를 모터(10)로 제어하여 춤을 추도록 할 수 있는 로봇(1)에 있어서,음악을 입력받는 마이크(100);음악과 춤의 상관관계를 학습한 데이터가 저장된 데이터저장부(200);상기 데이터저장부(200)와 유, 무선 통신하여 음악이나 춤 영상 데이터를 입력하여 상기 데이터저장부(200)에 저장될 수 있도록 하는 데이터입력부(300) 및상기 모터(10), 상기 마이크(100) 및 상기 데이터저장부(200)와 연결되어 상기 마이크(100)로부터 입력받은 음악에 맞추어 춤을 추도록 제어하는 제어

사람 형상을 하여 사람의 각 관절에 해당하는 부위를 모터(10)로 제어하여 춤을 추도록 할 수 있는 로봇(1)에 있어서,음악을 입력받는 마이크(100);음악과 춤의 상관관계를 학습한 데이터가 저장된 데이터저장부(200);상기 데이터저장부(200)와 유, 무선 통신하여 음악이나 춤 영상 데이터를 입력하여 상기 데이터저장부(200)에 저장될 수 있도록 하는 데이터입력부(300) 및상기 모터(10), 상기 마이크(100) 및 상기 데이터저장부(200)와 연결되어 상기 마이크(100)로부터 입력받은 음악에 맞추어 춤을 추도록 제어하는 제어부(400);상기 마이크(100) 및 상기 데이터입력부(300)를 통해 입력받은 음악으로부터 음악의 특징을 추출하는 음악특징추출부(500)를 더 포함하고, 상기 음악특징추출부(500)는 추출한 음악의 특징을 상기 데이터저장부(200)로 전송하며,상기 제어부(400)와 연결되어 상기 제어부(400)가 제어할 수 있는 카메라(700)를 더 포함하고, 상기 데이터입력부(300)를 통해 입력받은 춤 영상 또는 상기 카메라(700)를 통해 촬영한 무용수의 춤으로부터 춤의 특징을 추출하는 춤특징추출부(600)를 더 포함하고, 상기 춤특징추출부(600)는 추출한 음악의 특징을 상기 데이터저장부(200)로 전송하며,상기 로봇(1)의 각 관절마다 번호를 붙이고, 각 관절의 각도가 3차원 공간상의 x,y,z축에 대해 얼마만큼 회전했는지를 분석하여 관절의 움직임을 알고, 상기 로봇(1)의 각 관절의 기준 위치를 정하고 그 기준위치에 대해 각 관절이 어디로 위치하는지를 통해 관절의 움직임을 파악하며,상기 춤특징추출부(600)에서 영상은 3D Pose Estimation 기법을 이용하여 인체 관절 정보를 추출한 것을 오픈소스 도구를 사용하여 딥러닝 훈련용 동작 데이터로 활용하고, 상기 오픈소스 도구는 딥러닝 기법을 활용하여 이미지로 부터 인체를 분리하고 분리된 인체의 각 뼈대가 3차원 공간 상에 어떻게 위치하고 있는지를 추정하여 각 관절의 위치값을 벡터 데이터로 출력하고, 상기 관절의 위치 값은 17개의 관절을 3차원 좌표(x,y,z)로 표현하여 움직이는 것을 특징으로 하는 음악과 춤의 상관관계를 학습하여 춤을 추는 로봇.