초록 ▼

본 연구는 온라인 커뮤니티의 빅데이터를 분석·처리하고 인공지능에 의해 패턴을 해석하여 수난(水難) 발생 및 규모를 과학적으로 정량화하여 예측하는 기술개발을 목표로 하고 있다. 따라서 본 연구에서는 SNS 데이터를 활용하여 소규모 및 도심 하천 등에 대한 홍수예보의 한계점을 보완하고자 크라우드 소싱기반 홍수 탐지기를 개발하고자 하였다. 보다 빠른 소셜 네트워크 서비스 데이터 추출을 위하여 웹 스크래핑 알고리즘을 개발하였으며 대상 포털사이트 와 SNS 웹사이트에 대한 데이터 수집 및 분석을 수행하였다. 더불어 좀 더 정확한 데이터 추출

본 연구는 온라인 커뮤니티의 빅데이터를 분석·처리하고 인공지능에 의해 패턴을 해석하여 수난(水難) 발생 및 규모를 과학적으로 정량화하여 예측하는 기술개발을 목표로 하고 있다. 따라서 본 연구에서는 SNS 데이터를 활용하여 소규모 및 도심 하천 등에 대한 홍수예보의 한계점을 보완하고자 크라우드 소싱기반 홍수 탐지기를 개발하고자 하였다. 보다 빠른 소셜 네트워크 서비스 데이터 추출을 위하여 웹 스크래핑 알고리즘을 개발하였으며 대상 포털사이트 와 SNS 웹사이트에 대한 데이터 수집 및 분석을 수행하였다. 더불어 좀 더 정확한 데이터 추출을 위하여 정규 표현식을 활용한 자연어처리 모듈 고도화 알고리즘을 작성하였다. 특정 위기 이벤트 분석을 위해 웹 데이터 기반 데이터베이스를 구축하였으며 홍수탐지기(Flood-Finder)을 개발하였다.
홍수 탐지기의 성능을 시험 하고자 당해 연도에 발생한 홍수 사상과 비교·분석을 진행하였으며 지역 및 시간별 SNS 데이터의 양과 홍수로 인한 피해 규모가 유사한 패턴을 보였다. 향후 인공지능을 이용한 자연어 처리 고도화를 통해 데이터 수집 정확도를 향상 시킬 예정이며 수난을 예측을 통해 최적의 재난 대응 전략을 수립하는 플랫폼을 구축할 예정이다

(출처: 서지자료-초록 80p)

Abstract ▼

This research aims to develop a technology that scientifically quantifies and predicts occurrence and magnitude of water disaster by analyzing and processing big data of online community and interpreting patterns by artificial intelligence.
Therefore, in this study, we tried to develop flood dete

This research aims to develop a technology that scientifically quantifies and predicts occurrence and magnitude of water disaster by analyzing and processing big data of online community and interpreting patterns by artificial intelligence.
Therefore, in this study, we tried to develop flood detector based on crowd sourcing to supplement the limits of flood forecast for small scale and urban river by using SNS data. We have developed web scraping algorithm for extracting social network service data more quickly and analyzed collected data of the target portal site and SNS website. In addition, we have advanced a natural language processing module algorithm by using regular expressions for more accurate data extraction. We constructed a web data database for analyzing specific crisis events and developed a Flood-Finder. In order to test the performance of the flood detector, we compared and analyze the flood events in this year. The amount of SNS data by region and time showed a similar pattern with the scale of damage caused by the flood. In the future, we will improve the accuracy of data collection through advanced processing of natural language using artificial intelligence. Moreover, We plan to establish aplatform to establish optimal disaster response strategy through predicting water disaster.

(출처: Bibliographic Data -Abstract 81p)

목차 Contents

• 표지 ... 1
• 제출문 ... 3
• 요약문 ... 4
• Summary ... 6
• 목차 ... 9
• 표목차 ... 11
• 그림목차 ... 12
• 제1장 서론 ... 14
• 1. 연구의 필요성 ... 14
• 2. 연구개발 목표 및 내용 ... 16
• 2.1 연구개발 목표 ... 16
• 2.2 대표 성과 및 성과물 ... 17
• 2.3. 연구내용 ... 18
• 제2장 국내외 연구 현황 ... 20
• 1. 국내 현황 ... 20
• 2. 국외 현황 ... 22
• 제3장 클라우드 소싱 데이터 추출 알고리즘 개발 ... 26
• 1. 알고리즘 개발 구축 환경 ... 26
• 2. 클라우드 소싱 데이터 추출 알고리즘 ... 28
• 2.1 웹 크롤러(Web Crawler) ... 28
• 2.2 웹 사이트 및 소셜 네트워크의 선정 ... 32
• 2.3 선정 웹 사이트 및 소셜 네트워크 분석 ... 34
• 2.4 정확한 데이터 추출을 위한 자연어 처리 모듈 고도화 ... 42
• 3. 실시간 웹 크롤러 프로그램 개발 ... 51
• 제4장 클라우드 소싱 기반 홍수탐지기(Flood- Finder) 개발 ... 54
• 1. 데이터 불류 딕셔너리니 및 키워드 선정 ... 54
• 1.1 데이터 공간 정보 수집을 위한 지역명 분류 딕셔너리니 ... 54
• 1.2 수난과 관련된 키워드 선정 ... 54
• 2. 수난 관련 키워드 데이터베이스 구축 ... 57
• 2.1 키워드별 데이터베이스 구축 과정 ... 57
• 2.2 웹 크롤러를 이용한 수난 관련 키워드 DB 구축 결과 ... 59
• 3. 실시간 클라우드 소싱 데이터 기반 홍수탐지기 개발 ... 62
• 3.1 실시간 웹 크롤러 기반 홍수탐지기 개발 ... 62
• 3.2 실시간 웹 크롤로 기반 홍수탐지기 테스트 분석 ... 63
• 제5장 결론 ... 72
• 1. 결론 ... 72
• 2. 활용방안 ... 73
• 부록 ... 76
• 참고 문헌 ... 78
• 서지자료 ... 80
• Bibliographic data ... 81
• 끝페이지 ... 82