선택한 단어 수는 입니다.
최소 단어 이상 선택하여야 합니다.
최소 단어 이상 선택하여야 합니다.
선택한 단어 수는 30입니다.
최대 10 단어까지만 선택 가능합니다.
최대 10 단어까지만 선택 가능합니다.
문제 정의
- 기존의 가축 질병에 관한 정형적 데이터만으로는 사회이슈를 반영한 종합적인 분석에 한계가 있다. 따라서 본 연구에서는 온라인 뉴스기사를 통하여 사회이슈를 반영한 분석을 시도하였다. 거기에 더해 사회 현상에 민감하게 반응하는 실물가격 데이터를 결합하여 분석하였다.
- 본 연구는 사회이슈 문제를 반영한 비정형 데이터인 온라인뉴스기사와 정형 데이터인 달걀가격을 결합하여 분석하였다는 점에서 중요한 의의가 있다. 조류인플루엔자뿐만 아니라 다양한 전염성 질병으로 인한 사회이슈와 관련되어 나타나는 현상에 본 연구방법을 적용해 볼 수 있을 것으로 기대된다.
- 본 연구는 조류인플루엔자와 관련된 온라인 뉴스기사의 키워드 변화를 분석하여 달걀가격과의 관계를 알아보는 것을 목적으로 하였다. 이를 위하여 RSS에서 제공하는 온라인 뉴스기사 682건에서 주 단위로 키워드 빈도를 생성하였다.
- 본 연구에서는 사회이슈를 반영하는 온라인 뉴스기사의 키워드 변화와 실물가격 변동과의 상관관계를 알아보는 것을 목적으로 한다. 이를 위하여 비정형 데이터와 정형 데이터를 결합한 분석 방법을 제안한다.
제안 방법
- 따라서 본 연구에서는 온라인 뉴스기사를 통하여 사회이슈를 반영한 분석을 시도하였다. 거기에 더해 사회 현상에 민감하게 반응하는 실물가격 데이터를 결합하여 분석하였다.
- 이를 보완하기 위하여<Bootstrapping> 오퍼레이터를 이용해서 데이터 관측치를 23배 늘렸다. 다중선형회귀분석에서 너무 많은 변수로 인한 과대 모형 설명력을 제거하기 위하여 오퍼레이터를 이용하여 모형에 대한 설명력이 높은 변수를 선택하였다. 전진선택(Forward Selection)은 회귀방정식을 적합 시키기 위하여 가장 중요한 변수들을 찾는 방법의 하나이다.
- 둘째, 주 단위로 이슈들의 추이를 분석하기 위하여 오퍼레이터를 사용하여 주별 키워드매트릭스를 생성하였다. 주 단위 작업의 편의성을 위하여<Multiply> 오퍼레이터와 오퍼레이터를 사용하였다.
- 첫째, 온라인 뉴스기사에서 조류인플루엔자와 관련된 키워드 빈도를 추출한다. 둘째, 추출된 키워드를 바탕으로 시계열에 따른 변화를 분석한다. 셋째, 다중선형회귀모형을 이용하여 이슈 키워드들과 달걀가격과의 상관관계를 분석한다.
- 이를 위하여 RSS에서 제공하는 온라인 뉴스기사 682건에서 주 단위로 키워드 빈도를 생성하였다. 또한, 주 단위 평균 달걀가격을 수집하고 이를 결합하여 용어-기사 매트릭스를 생성하였다.
- 본 연구에서는 조류인플루엔자 발생으로 인한 사회이슈의 변화와 달걀가격과의 상관관계를 분석하기 위하여 데이터 수집, 전처리, 그리고 데이터 모델링 과정을 그림 1과 같이 수행하였다.
- 둘째, 추출된 키워드를 바탕으로 시계열에 따른 변화를 분석한다. 셋째, 다중선형회귀모형을 이용하여 이슈 키워드들과 달걀가격과의 상관관계를 분석한다. 이러한 연구는 간헐적 또는 주기적으로 발생하는 사회이슈를 파악하고 이를 통해 대응책을 마련할 수 있다.
- 셋째, 생성된 용어-기사 매트릭스를 시각화하였다. 키워드별각 주의 빈도를 각 주의 전체 빈도로 나누었다.
- com)에 공개된 데이터를 활용하였다. 소비자가격을 제공하지 않는 공휴일에는 하루 전날의 가격을 적용하였고, 주별 평균을 구하여 분석에 사용하였다. 달걀 가격은 1월 3주에 가장 높게 나타났고 그 추이는 그림 2와 같다.
- 시계열에 따른 조류 인플루엔자 관련 기사의 추이를 알아보기 위하여 수집된 온라인 뉴스기사를 주(weekly) 단위로 정리하였다. 조류인플루엔자가 처음 발생한 11월 2주와 3주에는 이러한 이슈를 반영한 기사의 수가 미미하였다.
- 이를 보완하기 위하여<Bootstrapping> 오퍼레이터를 이용해서 데이터 관측치를 23배 늘렸다.
- 본 연구는 조류인플루엔자와 관련된 온라인 뉴스기사의 키워드 변화를 분석하여 달걀가격과의 관계를 알아보는 것을 목적으로 하였다. 이를 위하여 RSS에서 제공하는 온라인 뉴스기사 682건에서 주 단위로 키워드 빈도를 생성하였다. 또한, 주 단위 평균 달걀가격을 수집하고 이를 결합하여 용어-기사 매트릭스를 생성하였다.
- 본 연구에서는 사회이슈를 반영하는 온라인 뉴스기사의 키워드 변화와 실물가격 변동과의 상관관계를 알아보는 것을 목적으로 한다. 이를 위하여 비정형 데이터와 정형 데이터를 결합한 분석 방법을 제안한다. 첫째, 온라인 뉴스기사에서 조류인플루엔자와 관련된 키워드 빈도를 추출한다.
- 이슈 트렌드 파악을 위하여 전체 키워드 빈도의 상위 20개를 선택하여 시각화하였다. 분석결과는 ‘달걀’, ‘가격’, ‘정부’ 키워드는 조류인플루엔자 발생 중기에 높은 빈도를 보인 것으로 나타났다.
- 조류인플루엔자에 대한 사회이슈의 변화를 알아보기 위하여 주 단위로 온라인 뉴스기사의 단어 빈도를 용어-기사 매트릭스로 작성하였다. 첫째, 전처리된 CSV 파일을 로드한 후 래피드마이너가 제공하는 오퍼레이터를 이용하여 키워드 빈도를 추출하였다.
- 조류인플루엔자를 반영한 데이터를 대상으로 14주 동안의 주별 키워드 추세와 달걀가격의 상관관계가 높은 키워드를 찾기 위하여 래피드마이너가 제공하는 오퍼레이터를 이용하여 다중선형회귀분석을 실시하였다. 종속변수는 달걀가격으로 하였고, 독립변수는 주 단위 키워드 빈도 100위까지의 키워드를 사용하였다. 따라서 독립 변수에 비해 데이터 세트의 관측치가 적은 문제가 있었다.
- 주 단위로 정리된 온라인 뉴스기사들로부터 키워드를 추출하기 위하여 한나눔 형태소 분석기를 이용해서 명사, 형용사, 부사를 추출하고 CSV 파일로 저장하였다. 이를 위하여 데이터베이스 테이블 속성에서 ‘제목’과 ‘기사내용’ 속성을 사용하였다.
- 전진선택(Forward Selection)은 회귀방정식을 적합 시키기 위하여 가장 중요한 변수들을 찾는 방법의 하나이다. 처음 한 개의 변수부터 시작해 한 번에 하나씩 변수를 모델에 추가해가며 모델에 적합한 변수를 찾는 작업을 반복하였다.
- 이를 위하여 비정형 데이터와 정형 데이터를 결합한 분석 방법을 제안한다. 첫째, 온라인 뉴스기사에서 조류인플루엔자와 관련된 키워드 빈도를 추출한다. 둘째, 추출된 키워드를 바탕으로 시계열에 따른 변화를 분석한다.
- 조류인플루엔자에 대한 사회이슈의 변화를 알아보기 위하여 주 단위로 온라인 뉴스기사의 단어 빈도를 용어-기사 매트릭스로 작성하였다. 첫째, 전처리된 CSV 파일을 로드한 후 래피드마이너가 제공하는 오퍼레이터를 이용하여 키워드 빈도를 추출하였다. 그 결과로 ‘달걀’, ‘조류’, ‘인플루엔자’, ‘고병원성’, ‘확산’ 등을 포함한 상위 20위 키워드를 생성하였다.
- 셋째, 생성된 용어-기사 매트릭스를 시각화하였다. 키워드별각 주의 빈도를 각 주의 전체 빈도로 나누었다. 이렇게 계산된 비율을 기준으로 14주 중 최댓값을 구하고, 각 키워드의 주 단위 비율을 최댓값으로 나누었다.
대상 데이터
- 또한, 조류인플루엔자가 발생한 기간의 달걀가격 데이터를 수집하기 위하여 축산물품질평가원에서 제공하는 축산유통종합정보센터(http://www.ekapepia.com)에 공개된 데이터를 활용하였다. 소비자가격을 제공하지 않는 공휴일에는 하루 전날의 가격을 적용하였고, 주별 평균을 구하여 분석에 사용하였다.
- 본 연구를 수행하기 위하여 조류인플루엔자가 처음 발생한 2016년 11월 2주부터 14주 동안 RSS(Really Simple Syndication) 기반으로 제공되는 뉴스기사를 194개 웹사이트로부터 53,401건 수집하였다. 이렇게 수집된 기사 중 제목 및 요약에 ‘조류독감’ 또는 ‘조류인플루엔자’라는 단어가 포함된 기사 689건을 추출하였으며 그중 중복 기사 7건을 제거하고 표 1에서 보듯이 682건의 기사를 연구에 사용하였다.
- 이렇게 수집된 기사 중 제목 및 요약에 ‘조류독감’ 또는 ‘조류인플루엔자’라는 단어가 포함된 기사 689건을 추출하였으며 그중 중복 기사 7건을 제거하고 표 1에서 보듯이 682건의 기사를 연구에 사용하였다.
- 주 단위 작업의 편의성을 위하여<Multiply> 오퍼레이터와 오퍼레이터를 사용하였다.
데이터처리
- 이는 미국산 달걀을 수입함으로써 달걀의 공급이 원활해짐에 따라 가격이 하락하는 추세를 보인다. 따라서 조류인플루엔자와 달걀가격의 상관관계 분석을 위하여 다중선형회귀분석을 하였다.
- 조류인플루엔자를 반영한 데이터를 대상으로 14주 동안의 주별 키워드 추세와 달걀가격의 상관관계가 높은 키워드를 찾기 위하여 래피드마이너가 제공하는 오퍼레이터를 이용하여 다중선형회귀분석을 실시하였다. 종속변수는 달걀가격으로 하였고, 독립변수는 주 단위 키워드 빈도 100위까지의 키워드를 사용하였다.
이론/모형
- 이를 위하여 전처리 프로그램인 한나눔 형태소 분석기와 데이터 마이닝 프로그램인 래피드마이너 7.3을 사용하였다. 래피드마이너는 텍스트 분석을 위해 Text Processing 확장 패키지를 제공한다.
성능/효과
- 주 단위 작업의 편의성을 위하여<Multiply> 오퍼레이터와 오퍼레이터를 사용하였다. 그 결과 14주간의 정형화된 키워드 빈도 테이블이 생성되었다. 이때 주 단위 키워드는 100위까지 생성하였으며, 전체 20위까지의 키워드 중에서 100위 이내에 포함되지 않은 키워드가 있는 경우에는 그 키워드 값을 0으로 설정하였다.
- 그 결과로 ‘달걀’, ‘조류’, ‘인플루엔자’, ‘고병원성’, ‘확산’ 등을 포함한 상위 20위 키워드를 생성하였다.
- 다음으로 다중선형회귀 모델의 적용결과는 달걀가격 상승에 영향을 미치는 키워드가 ‘명절’, ‘물가’ 등인 것으로 나타났다.
- 반면에, 하락에 영향을 미친 키워드는 ‘미국산’, ‘소비자’ 등이라는 것을 파악할 수 있었다.
- 분석결과는 ‘달걀’, ‘가격’, ‘정부’ 키워드는 조류인플루엔자 발생 중기에 높은 빈도를 보인 것으로 나타났다.
후속연구
- 토픽모델링(Topic Modelling)은 주어진 문서에서 발견된 단어들의 분포를 분석함으로써 해당 문서가 어떤 주제를 가졌는지 파악하는 텍스트 분석 기법이다[29]. 따라서 향후 연구에서는 단순히 단어를 활용하는 것보다, 신문기사의 내용에 나타나는 주제(토픽)들을 찾아내어 상품의 가격과 어떤 관계가 있는지 연구하는 것이 필요하다.
- 본 연구는 사회이슈 문제를 반영한 비정형 데이터인 온라인뉴스기사와 정형 데이터인 달걀가격을 결합하여 분석하였다는 점에서 중요한 의의가 있다. 조류인플루엔자뿐만 아니라 다양한 전염성 질병으로 인한 사회이슈와 관련되어 나타나는 현상에 본 연구방법을 적용해 볼 수 있을 것으로 기대된다.
※ AI-Helper는 부적절한 답변을 할 수 있습니다.