본 논문은 사운드 아트와 사운드 아트에 포함되어 있는 소니피케이션(Sonification)에 대해 소개한다. 본인 작품, 「Wrinkle Sound」을 패턴인식 알고리즘인 KNN(K-nearest neighbors)과 주름의 특징 추출 알고리즘인 가버필터(Gabor Filter)를 이용하여 애플리케이션으로 제작하였다. KNN 알고리즘에 차선책을 선택할 수 있는 기능을 추가하여 주름 데이터와 음악의 패턴을 매칭하는 「Wrinkle Sound」 애플리케이션 제작 과정을 상세히 기술한다. ...
본 논문은 사운드 아트와 사운드 아트에 포함되어 있는 소니피케이션(Sonification)에 대해 소개한다. 본인 작품, 「Wrinkle Sound」을 패턴인식 알고리즘인 KNN(K-nearest neighbors)과 주름의 특징 추출 알고리즘인 가버필터(Gabor Filter)를 이용하여 애플리케이션으로 제작하였다. KNN 알고리즘에 차선책을 선택할 수 있는 기능을 추가하여 주름 데이터와 음악의 패턴을 매칭하는 「Wrinkle Sound」 애플리케이션 제작 과정을 상세히 기술한다. 샘플링 개수에 따른 음악 매칭률 실험을 통해, 차선책이 가능한 KNN과 SVM(Support Vector Machine) 알고리즘의 성능을 평가하였다. 샘플링 개수가 70개일 때, KNN 알고리즘이 가장 좋은 성능을 보였다. 제작 과정에서 KNN 알고리즘을 이용하여 음악의 패턴을 매칭함으로써 예술가들이 구상하는 작품의 표현할 때, 표현 방법의 확장을 기대할 수 있다. 본 애플리케이션을 제작하여, 인체 데이터 중 얼굴의 주름 데이터를 사용한 사운드 아트의 소니피케이션으로 새로운 시도와 독특한 데이터로 관객과의 소통 시 새로운 경험을 선사한다.
본 논문은 사운드 아트와 사운드 아트에 포함되어 있는 소니피케이션(Sonification)에 대해 소개한다. 본인 작품, 「Wrinkle Sound」을 패턴인식 알고리즘인 KNN(K-nearest neighbors)과 주름의 특징 추출 알고리즘인 가버필터(Gabor Filter)를 이용하여 애플리케이션으로 제작하였다. KNN 알고리즘에 차선책을 선택할 수 있는 기능을 추가하여 주름 데이터와 음악의 패턴을 매칭하는 「Wrinkle Sound」 애플리케이션 제작 과정을 상세히 기술한다. 샘플링 개수에 따른 음악 매칭률 실험을 통해, 차선책이 가능한 KNN과 SVM(Support Vector Machine) 알고리즘의 성능을 평가하였다. 샘플링 개수가 70개일 때, KNN 알고리즘이 가장 좋은 성능을 보였다. 제작 과정에서 KNN 알고리즘을 이용하여 음악의 패턴을 매칭함으로써 예술가들이 구상하는 작품의 표현할 때, 표현 방법의 확장을 기대할 수 있다. 본 애플리케이션을 제작하여, 인체 데이터 중 얼굴의 주름 데이터를 사용한 사운드 아트의 소니피케이션으로 새로운 시도와 독특한 데이터로 관객과의 소통 시 새로운 경험을 선사한다.
This paper introduces sonifcation included in sound art. My work, 「Wrinkle Sound」, was made by using KNN(K-nearest neighbors), a pattern recognition algorithm, and Gabor filter, which is a feature extraction algorithm for wrinkles. We will describe in detail the process of creating a 「Wrinkle Sound」...
This paper introduces sonifcation included in sound art. My work, 「Wrinkle Sound」, was made by using KNN(K-nearest neighbors), a pattern recognition algorithm, and Gabor filter, which is a feature extraction algorithm for wrinkles. We will describe in detail the process of creating a 「Wrinkle Sound」 application that matches the pattern of wrinkled data and music by adding a function to select the best solution to the KNN algorithm. Through the usage of the experiment of music matching rate according to the number of sampling, we evaluated the performance of KNN and SVM(Support Vector Machine) algorithm. When the evaluation reached 70 samples, the KNN algorithm showed the best performance. By using the KNN algorithm to match the patterns of music in the production process, it is expected to expand the expression method when artists express their works. The application created offers help in Sonification of sound art using wrinkled data obtained from human body, and provides a unique and new experience in communicating with audiences.
This paper introduces sonifcation included in sound art. My work, 「Wrinkle Sound」, was made by using KNN(K-nearest neighbors), a pattern recognition algorithm, and Gabor filter, which is a feature extraction algorithm for wrinkles. We will describe in detail the process of creating a 「Wrinkle Sound」 application that matches the pattern of wrinkled data and music by adding a function to select the best solution to the KNN algorithm. Through the usage of the experiment of music matching rate according to the number of sampling, we evaluated the performance of KNN and SVM(Support Vector Machine) algorithm. When the evaluation reached 70 samples, the KNN algorithm showed the best performance. By using the KNN algorithm to match the patterns of music in the production process, it is expected to expand the expression method when artists express their works. The application created offers help in Sonification of sound art using wrinkled data obtained from human body, and provides a unique and new experience in communicating with audiences.
AI-Helper
※ AI-Helper는 부적절한 답변을 할 수 있습니다.