[논문]머신러닝 알고리즘 분석 및 비교를 통한 Big-5 기반 성격 분석 연구

김용준

doi:10.7236/jiibc.2019.19.4.169

머신러닝 알고리즘 분석 및 비교를 통한 Big-5 기반 성격 분석 연구
A Study on Big-5 based Personality Analysis through Analysis and Comparison of Machine Learning Algorithm 원문보기

The journal of the institute of internet, broadcasting and communication : JIIBC, v.19 no.4, 2019년, pp.169 - 174

김용준 (아주대학교 컴퓨터공학과)

초록
AI-Helper

본 연구에서는 설문지를 이용한 데이터 수집과 데이터 마이닝에서 클러스터링 기법으로 군집하여 지도학습을 이용하여 유사성을 판단하고, 성격들의 상관 관계의 적합성을 분석하기 위해 특징 추출 알고리즘들과 지도학습을 이용하는 것을 목표로 진행한다. 연구 수행은 설문조사를 진행 후 그 설문조사를 토대로 모인 데이터들을 정제하고, 오픈 소스 기반의 데이터 마이닝 도구인 WEKA의 클러스터링 기법들을 통해 데이터 세트를 분류하고 지도학습을 이용하여 유사성을 판단한다. 그리고 특징 추출 알고리즘들과 지도학습을 이용하여 성격에 대해 적합한 결과가 나오는지에 대한 적합성을 판단한다. 그 결과 유사성 판단에 가장 정확도 높게 도움을 주는 것은 EM 클러스터링으로 3개의 분류하고 Naïve Bayes 지도학습을 시킨 것이 가장 높은 유사성 분류 결과를 도출하였고, 적합성을 판단하는데 도움이 되도록 특징추출과 지도학습을 수행하였을 때, Big-5 각 성격마다 문항에 추가되고 삭제되는 것에 따라 정확도가 변하는 모습을 찾게 되었고, 각 성격 마다 차이에 대한 분석을 완료하였다.

Abstract ▼ AI-Helper

In this study, I use surveillance data collection and data mining, clustered by clustering method, and use supervised learning to judge similarity. I aim to use feature extraction algorithms and supervised learning to analyze the suitability of the correlations of personality. After conducting the questionnaire survey, the researchers refine the collected data based on the questionnaire, classify the data sets through the clustering techniques of WEKA, an open source data mining tool, and judge similarity using supervised learning. I then use feature extraction algorithms and supervised learning to determine the suitability of the results for personality. As a result, it was found that the highest degree of similarity classification was obtained by EM classification and supervised learning by Naïve Bayes. The results of feature classification and supervised learning were found to be useful for judging fitness. I found that the accuracy of each Big-5 personality was changed according to the addition and deletion of the items, and analyzed the differences for each personality.

주제어

표/그림 (5)

그림 그림 1. 연구 절차 및 방법 도식 Fig. 1. Overview of research procedures and methods visualization.
그림 그림 2. 군집화 성공 시각화 Fig. 2. Clustering success visualization.
표 표 1. EM, X-means 결과 Table 1. EM, X-means results.
표 표 2. Big-5 중 E 성격에 관한 결과 Table 2. Results for Big-5 E personality
표 표 3. 같게 나온 결과 확인 Table 3. Confirm the same result.

AI 본문요약
AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

제안 방법

표[1]에서 확인할 수 있듯이. 7개의 분류를 기준으로 작업을 진행하였다. 표에서 나타나는 결과로 확인했을 때, 확실히 EM에 비해 X-means로 작업한 것이 결측 값이 발생한 개체와 가장 가까운 거리에 있는 K개의 이웃 개체와 거리를 계산하여 다수결로 결측 값을 대체하는 방법이기 때문에 7개의 분류에서 확실하게 중앙 집중형 구조를 보이는 것을 확인할 수 있다.
Big-5 성격 분석 기반으로 제작한 설문지를 이용하여 학생들에게 데이터를 수집하고, 데이터를 데이터 세트화하여 준비한다. 그 후 BFI Scoring을 이용하여 분류하기 위한 데이터 세트 작업을 통하여 데이터 세트들을 정리한다. 그 후 특징 추출 알고리즘과 지도학습을 적용하고, 각 문항과 결과의 연결성을 확인하여 각 문항의 성격이 적합한 지에 대한 판단에 도움이 되도록 분석한다.
그 후 지도학습을 적용하기 위하여 인공지능과 데이터 마이닝 분야에서 가장 많이 사용되고, 머신 러닝에서 지도학습으로 가장 많이 사용되는 Naïve Bayes, MLP, SVM 을 이용하여 분류된 데이터 세트를 분석한다.
그 후 BFI Scoring을 이용하여 분류하기 위한 데이터 세트 작업을 통하여 데이터 세트들을 정리한다. 그 후 특징 추출 알고리즘과 지도학습을 적용하고, 각 문항과 결과의 연결성을 확인하여 각 문항의 성격이 적합한 지에 대한 판단에 도움이 되도록 분석한다.
네 번째 단계는 전처리 과정을 통해 생성한 데이터 세트를 바탕으로, Big-Five에 적용 가능한 알고리즘을 연구한다. 나이브 베이즈와 다층 퍼셉트론 구조를 이용하여 분류작업을 한다.
다음, 평가 과정에서는 모델링을 통해 나온 자료들과 처음 비즈니스 단계에서 분석했던 Big-Five와의 비교 분석 및 테스팅을 검증하고 평가한다. 이를 통해 전처리 방식과 그 결과, 분석 내용, 구축한 데이터 세트의 형식등 전반적인 내용을 판단하여 유효성을 검증한다.
두 번째, 데이터 이해 과정에서는 설문 조사로 얻은 설문지 데이터를 분석한다. 해당 과정은 Big-Five 분석과 분류를 위한 기반 지식 및 데이터를 수집 및 추출하고 분석하여 이해하는 단계이다.
또한, 두 번째는 데이터 마이닝 기법을 바로 적용하는 데에 데이터의 형식과 일관성 면에서 적합하지 않기 때문에 발전 연구를 진행하기 위하여는 상당히 오랜 시간의 반복적인 분석 과정, 다양한 전처리, 그리고 철저하고 치밀한 데이터 세트 가공 작업이 필요하다는 것이다. 마지막, 본 실험으로 사용한 분류기는 관련 연구에서 가장 많이 사용한 세 가지를 선정하여 적용하였다. 그러나 추후 비교 연구 시, 다양한 설정과 선택 요소가 존재하기 때문에, 같은 분류기를 사용할지라도 다른 프로젝트 및 연구 결과와 차이가 있을 수 있다.
먼저, 연구 절차 중, 비즈니스 이해 단계에서 본 논문의 서론에서 언급한 모든 내용을 토대로, Big-Five가 무엇인지에 대해 분석 후 데이터 마이닝으로 해결해야 하는 문제를 정의하고, 연구의 목적을 구분한다.
본 연구는 실제 설문 조사를 통해 얻은 설문지의 기록을 기반으로, 인공지능의 데이터 마이닝 기법을 적용하기 위한 높은 수준의 데이터 세트를 생성하고, 객관적인 평가 기준을 바탕으로 기계학습 알고리즘을 분류, 비교하였다. 이를 통해 Big-Five를 보다 정확한 예측하는 분류기를 선별하였고, 주요한 지표가 되는 5가지 성격들로 분류 분석 검증하였다.
. 본 연구에서는 기계학습과 특징 선택 알고리즘을 활용하고 지식베이스 기반 접근법이 아닌, 데이터 중심적 접근법을 사용하여 성격 분석을 할 수 있도록 특징 집단을 선택하고 심리학 분야로 국한되어 있는 것을 공학 분야의 기계 학습과 인공지능 기법을 이용하여 유사성과 적합성을 판단하여, 전문가가 여러 가지 분석을 할 때 도움이 되도록 보조하는 보다 효율적인 알고리즘 및 접근 방식을 제안한다.
본 연구에서는 우선 Big-5 성격 검사 기반으로 만들어진 설문 테스트를 이용하여 설문지를 만들고, 그 후 학생들에게 설문조사를 진행했고, 설문조사를 이용하여 얻은 데이터들을 우선 데이터 세트화를 진행하여, 데이터 마이닝 도구인 WEKA로 수행할 수 있도록 작업을 진행한다. 그리고 WEKA를 이용하여 군집화 기법을 이용하여 우선 분류를 하고, 군집된 데이터 세트를 1차 분석으로 특징 추출 알고리즘들을 이용하여 분석하고, 머신 러닝 기법을 이용하여 2차 분석을 진행한다.
이를 통해, 본 연구의 궁극적인 의미를 간략하게 설명하면 다음과 같다. 앞서 다룬 연구의 필요성과 목적을 만족 시키고 달성하기 위하여 심리학 분야인 Big-Five를 위해 데이터 마이닝 연구 방법론 및 지도학습 프로세스를 접목하였다는 것이다. 본 연구의 한계점은 크게 세 가지로 구분된다.
이러한 문제를 해결하기 위해 데이터 마이닝을 이용한 연구를 진행하였으며 데이터 마이닝은 인공 지능 및 텍스트 마이닝과 결합 된 빅 데이터 분석 방법이다^[1]. 본 연구에서는 기계학습과 특징 선택 알고리즘을 활용하고 지식베이스 기반 접근법이 아닌, 데이터 중심적 접근법을 사용하여 성격 분석을 할 수 있도록 특징 집단을 선택하고 심리학 분야로 국한되어 있는 것을 공학 분야의 기계 학습과 인공지능 기법을 이용하여 유사성과 적합성을 판단하여, 전문가가 여러 가지 분석을 할 때 도움이 되도록 보조하는 보다 효율적인 알고리즘 및 접근 방식을 제안한다.
본 연구는 실제 설문 조사를 통해 얻은 설문지의 기록을 기반으로, 인공지능의 데이터 마이닝 기법을 적용하기 위한 높은 수준의 데이터 세트를 생성하고, 객관적인 평가 기준을 바탕으로 기계학습 알고리즘을 분류, 비교하였다. 이를 통해 Big-Five를 보다 정확한 예측하는 분류기를 선별하였고, 주요한 지표가 되는 5가지 성격들로 분류 분석 검증하였다. 전문적인 지식이 아닌 비지도 학습을 이용한 설문 조사를 한 사람들의 특성을 유사도를 통해 Big-Five로 나누어지는 것을 유추하였다.
다음, 평가 과정에서는 모델링을 통해 나온 자료들과 처음 비즈니스 단계에서 분석했던 Big-Five와의 비교 분석 및 테스팅을 검증하고 평가한다. 이를 통해 전처리 방식과 그 결과, 분석 내용, 구축한 데이터 세트의 형식등 전반적인 내용을 판단하여 유효성을 검증한다. 마지막, 전개 단계에서는 데이터 세트를 조금 더 체계화하고 가용 알고리즘을 선택하여 진단 및 처방에 적용하고, 사용되는 알고리즘의 개선과 테스트 및 검증을 지속적으로 수행한다.
이를 통해 Big-Five를 보다 정확한 예측하는 분류기를 선별하였고, 주요한 지표가 되는 5가지 성격들로 분류 분석 검증하였다. 전문적인 지식이 아닌 비지도 학습을 이용한 설문 조사를 한 사람들의 특성을 유사도를 통해 Big-Five로 나누어지는 것을 유추하였다. BFI Scoring을 이용하여 특징추출 알고리즘인 뻐꾸기 탐색으로 인해 나오는 결과가 적합성을 판단하는데 가장 높은 정확도를 보였고, 군집화의 EM 클러스터링 기법과 지도학습의 Naïve Bayes로 유사성을 판단하는데 가장 높은 정확도를 보인 것을 판단하였다.
클러스터링을 이용하여 유사성을 예측하기 위하여 데이터 세트를 시각화 하였다. 홀수로 진행한 이유는 EM 클러스터링에서 아무런 작업을 하지 않은 기준으로 수행하였을 때, 7개의 클러스터링으로 분류가 최적화된 것으로 나왔기 때문에, EM 클러스터링과 X-means 클러스터링 두 개 다 7을 기준으로 클러스터링을 진행하였고, 그렇기에 홀수로 분류를 진행하였다.
클러스터링을 이용하여 유사성을 예측하기 위하여 데이터 세트를 시각화 하였다. 홀수로 진행한 이유는 EM 클러스터링에서 아무런 작업을 하지 않은 기준으로 수행하였을 때, 7개의 클러스터링으로 분류가 최적화된 것으로 나왔기 때문에, EM 클러스터링과 X-means 클러스터링 두 개 다 7을 기준으로 클러스터링을 진행하였고, 그렇기에 홀수로 분류를 진행하였다. 하지만, 그림[2]에서 나타나듯, 3개와 5개, 7개로 분류한 그림에서는 구역이 나뉘는 것이 확실히 나타나는 것을 확인할 수 있다.

데이터처리

본 연구에서는 우선 Big-5 성격 검사 기반으로 만들어진 설문 테스트를 이용하여 설문지를 만들고, 그 후 학생들에게 설문조사를 진행했고, 설문조사를 이용하여 얻은 데이터들을 우선 데이터 세트화를 진행하여, 데이터 마이닝 도구인 WEKA로 수행할 수 있도록 작업을 진행한다. 그리고 WEKA를 이용하여 군집화 기법을 이용하여 우선 분류를 하고, 군집된 데이터 세트를 1차 분석으로 특징 추출 알고리즘들을 이용하여 분석하고, 머신 러닝 기법을 이용하여 2차 분석을 진행한다. 2차 분석에 사용된 머신 러닝 기법은 지도학습과 특징 추출 알고리즘을 같이 사용하여 분석을 진행한다.

이론/모형

그리고 WEKA를 이용하여 군집화 기법을 이용하여 우선 분류를 하고, 군집된 데이터 세트를 1차 분석으로 특징 추출 알고리즘들을 이용하여 분석하고, 머신 러닝 기법을 이용하여 2차 분석을 진행한다. 2차 분석에 사용된 머신 러닝 기법은 지도학습과 특징 추출 알고리즘을 같이 사용하여 분석을 진행한다.
기본 연구 진행의 토대는 교차 산업 표준 절차 방법론을 따른다.

성능/효과

BFI Scoring을 이용하여 특징추출 알고리즘인 뻐꾸기 탐색으로 인해 나오는 결과가 적합성을 판단하는데 가장 높은 정확도를 보였고, 군집화의 EM 클러스터링 기법과 지도학습의 Naïve Bayes로 유사성을 판단하는데 가장 높은 정확도를 보인 것을 판단하였다.
EM 클러스터링을 이용하여 분류한 결과 중 가장 높은 정확도를 보인 것은 각 분류 개수 마다 Naïve Bayes가 가장 높은 정확도를 보였고, 특히 3개로 분류하고 Naïve Bayes를 이용하여 작업한 것이 가장 높은 정확도를 보였다.
X-means를 이용하여 분류 한 결과 중 가장 높은 정확도를 보인 것은 이 또한 3개로 분류하고, 지도학습으로는 Naïve Bayes와 MLP를 이용하여 분류한 것이 가장 좋은 결과를 보였다.
기존에 사람의 성격에 대한 수치화나 체계화된 분석이 없었기에 사람의 성격에 대해 정의하는 것이 어려웠다. 그리고 테스트에 참여한 학생들이 알 수 있는 기존 성격 분석에서는 각 문항과 테스트에 맞는 분석 결과만을 알 수 있었고, 전문가들이 어떠한 이유로 결과가 나온지에 대해서는 알 수 없고, 전문가의 의견만을 알 수 있었다. 본인 성격 외에 성격 분포에 대해 연관성과 유사성에 대해선 알 수 없었다.
더 정확히 확인해 본다면, 정확도와 kappa 일치도, 정밀도를 전체적으로 보았을 때, 가장 높은 정확도를 확인할 수 있는 것은 EM 클러스터링을 이용하여 분류하고 Naïve Bayes를 이용한 결과가 95.6822라는 높은 정확도를 보이면서 가장 좋은 결과라는 것을 볼 수 있고, 그 결과로 전체 설문지 데이터 세트의 유사성 분석에 도움을 줄 수 있는 것으로 판단할 수 있다.
수많은 연구 결과 성격 5요인 이론이 개인의 행복, 신체적·정신적 건강, 종교성, 정체성뿐 아니라 가족, 친구, 연인 사이에서의 각종 관계적 결과들 및 직업 선택, 직무 만족도, 수행, 사회 참여, 범죄 행동, 정치적 입장 같은 요소들을 잘 예측한다는 것이 밝혀졌다.
BFI Scoring을 이용하여 특징추출 알고리즘인 뻐꾸기 탐색으로 인해 나오는 결과가 적합성을 판단하는데 가장 높은 정확도를 보였고, 군집화의 EM 클러스터링 기법과 지도학습의 Naïve Bayes로 유사성을 판단하는데 가장 높은 정확도를 보인 것을 판단하였다. 심리학 전문가들 개인마다 의견과 관점이 여러 가지로 나뉠 때, 판단에 도움을 주도록 각 성격 마다 적합성을 판단하는 것에는 BFI Scoring을 이용하여 데이터 세트를 정리하고, 지도학습과 특징추출 알고리즘을 이용하여 각 성격의 적합성을 판단하는 것이 가장 높은 정확도를 보이는 것으로 적합하게 판단한다. 이를 통해, 본 연구의 궁극적인 의미를 간략하게 설명하면 다음과 같다.
이 결과로 EM 클러스터링에서는 3개로 분류하고 지도학습은 Naïve Bayes를 이용하여 유사성을 분석하는데 도움을 주는 것으로 판단할 수 있다.
이 결과로 X-means 클러스터링에서는 3개로 분류하고, 지도학습으로는 Naïve Bayes와 MLP를 이용하여 유사성을 분석하는데 도움을 주는 것으로 판단할 수 있다.
7개의 분류를 기준으로 작업을 진행하였다. 표에서 나타나는 결과로 확인했을 때, 확실히 EM에 비해 X-means로 작업한 것이 결측 값이 발생한 개체와 가장 가까운 거리에 있는 K개의 이웃 개체와 거리를 계산하여 다수결로 결측 값을 대체하는 방법이기 때문에 7개의 분류에서 확실하게 중앙 집중형 구조를 보이는 것을 확인할 수 있다. EM 클러스터링을 이용하여 분류한 결과 중 가장 높은 정확도를 보인 것은 각 분류 개수 마다 Naïve Bayes가 가장 높은 정확도를 보였고, 특히 3개로 분류하고 Naïve Bayes를 이용하여 작업한 것이 가장 높은 정확도를 보였다.

후속연구

마지막으로, 본 연구에서 적용한 다양한 데이터 마이닝 알고리즘이 아닌 또 다른 알고리즘을 탐구 및 사용하여 다른 결과를 이끌어낼 수 있을 것이다. Big-Five를 통한 성격분석을 위한 설문지뿐만 아니라, PHQ-9 및 여러 설문 방법들을 더 이용하여 확장성을 고려할 것이다. 적용한 다양한 머신 러닝 알고리즘들과 특징 선택 알고리즘이 아닌 또 다른 알고리즘들을 추가적으로 사용하여 다양한 결과를 분석할 계획이다.
마지막, 본 실험으로 사용한 분류기는 관련 연구에서 가장 많이 사용한 세 가지를 선정하여 적용하였다. 그러나 추후 비교 연구 시, 다양한 설정과 선택 요소가 존재하기 때문에, 같은 분류기를 사용할지라도 다른 프로젝트 및 연구 결과와 차이가 있을 수 있다. 향후 관련 연구는 본 연구 한계점을 극복하는 방향으로 진행할 수 있다.
또한, 현재 주어진 데이터 세트의 테스트 확인 기록에 대하여, 보다 더 복잡한 알고리즘을 통해 자연어 처리를 수행하여 세밀하게 속성 및 수치를 부여할 수 있다. 마지막으로, 본 연구에서 적용한 다양한 데이터 마이닝 알고리즘이 아닌 또 다른 알고리즘을 탐구 및 사용하여 다른 결과를 이끌어낼 수 있을 것이다. Big-Five를 통한 성격분석을 위한 설문지뿐만 아니라, PHQ-9 및 여러 설문 방법들을 더 이용하여 확장성을 고려할 것이다.
Big-Five를 통한 성격분석을 위한 설문지뿐만 아니라, PHQ-9 및 여러 설문 방법들을 더 이용하여 확장성을 고려할 것이다. 적용한 다양한 머신 러닝 알고리즘들과 특징 선택 알고리즘이 아닌 또 다른 알고리즘들을 추가적으로 사용하여 다양한 결과를 분석할 계획이다.
그러나 추후 비교 연구 시, 다양한 설정과 선택 요소가 존재하기 때문에, 같은 분류기를 사용할지라도 다른 프로젝트 및 연구 결과와 차이가 있을 수 있다. 향후 관련 연구는 본 연구 한계점을 극복하는 방향으로 진행할 수 있다. 먼저, 데이터 세트를 보강하기 위하여 그래프 또는 관련된 다른 데이터 값을 추가할 수 있다.

질의응답

핵심어	질문	논문에서 추출한 답변
	데이터 마이닝이란?	이러한 문제를 해결하기 위해 데이터 마이닝을 이용한 연구를 진행하였으며 데이터 마이닝은 인공 지능 및 텍스트 마이닝과 결합 된 빅 데이터 분석 방법이다[1]. 본 연구에서는 기계학습과 특징 선택 알고리즘을 활용하고 지식베이스 기반 접근법이 아닌, 데이터 중심적 접근법을 사용하여 성격 분석을 할 수 있도록 특징 집단을 선택하고 심리학 분야로 국한되어 있는 것을 공학 분야의 기계 학습과 인공지능 기법을 이용하여 유사성과 적합성을 판단하여, 전문가가 여러 가지 분석을 할 때 도움이 되도록 보조하는 보다 효율적인 알고리즘 및 접근 방식을 제안 한다.
	5가지 성격 특성 요소에는 어떤 것이 있는가?	5가지 성격 특성 요소(Big Five personality traits) 는 심리학에서 경험적인 조사와 연구를 통하여 정립한 성격 특성의 다섯 가지 주요한 요소 혹은 차원을 말한다. 신경성, 외향성, 친화성, 성실성, 경험에 대한 개방성의 다섯 가지 요소가 있으며, Costa & McCrae에 의해서 집대성된 모델로 다양한 나라들에서 그 유효성이 확인된바 있다. 현대 심리학계에서 가장 널리 인정받고 있는 성격이론이다.
	Weka는 무엇을 포함하는가?	Weka는 GNU General Public License 하에서 사용 가능한 자유 소프트웨어이고, 알고리즘은 데이터 세트에 직접 적용하거나 자신의 Java 코드에서 호출 할 수 있다. Weka 는 데이터 사전 처리, 분류, 회귀, 클러스터링, 연결 규칙 및 시각화를위한 도구를 포함 한다 .

표제어: PCR

동의어: Packet Collision Rate

용어 설명 출처 목록 (6)

용어 설명: PCR은 세균 특이성이 있는 primer를 이용하여 적은 수의 세균이 있을지라도 쉽게 검출할 수 있는 유용한 방법이며, 이를 이용하여 구강 내 치면세균막이나 타액에서 직접 세균을 검출할 수 있게 되었다[8].

내보내기 구분	파일저장 인쇄 메일전송
구성항목	기본정보 상세정보 관리번호, 논문명, 저널/프로시딩명, 저자 , 발행년, 권, 호, 시작페이지, 끝페이지, 발행기관 관리번호, 논문명, 대등논문명, 저자 , 저널/프로시딩명, 발행기관, 발행년, 발행언어, 권, 호, 시작페이지, 끝페이지, ISBN, ISSN, 주제분야, 키워드, 초록(한글), 초록(영문), 저자(소속기관)
저장형식	Text(ASCII format) Excel format RefWorks Direct Export RIS format (for Reference Manager, ProCite, EndNote), Scholar's Aids, Mendeley
메일정보	받는사람 (필수) @ 보내는사람 (선택) @ 제목 내용 KISTI 검색결과 이메일 서비스
안내	총 건의 자료가 검색되었습니다. 다운받으실 자료의 인덱스를 입력하세요. (1-10,000) 검색결과의 순서대로 최대 10,000건 까지 다운로드가 가능합니다. 데이타가 많을 경우 속도가 느려질 수 있습니다.(최대 2~3분 소요) 다운로드 파일은 UTF-8 형태로 저장됩니다. 파일의 내용이 제대로 보이지 않을실 때는 웹브라우저 상단의 보기 -> 인코딩 -> 자동선택 여부를 확인하십시오. ~ Text(ASCII format) Excel format

연합인증