초록

AI-Helper

인간은 문서전체를 읽지 않고 대표적인 단어를 보는 것만으로 정치나 스포츠 등의 분야를 정확히 인지할 수 있다. 문서 전체는 물론 부분 텍스트(단락)에 출현하는 소수의 단어 정보에서 문서의 분야를 정확히 결정하기 위한 분야연상어의 구축은 중요한 연구과제이다. 미리 분야체계를 정의하고, 각 분야에 해당하는 문서를 인터넷이나 서적을 통해 수집한다. 본 논문은 수집 문서의 분야를 정확히 지시하는 분야연상어를 수집하는 방법을 제안한다. 문서의 분야결정 시점을 고려하여 분야연상어의 수준을 정하였다. 인도네시아어의 분야연상어 사전을 자동으로 구축하기 위해 먼저 한국어로 구축한 분야 연상 지식을 추출하는 방법을 제안한다.

인간은 문서전체를 읽지 않고 대표적인 단어를 보는 것만으로 정치나 스포츠 등의 분야를 정확히 인지할 수 있다. 문서 전체는 물론 부분 텍스트(단락)에 출현하는 소수의 단어 정보에서 문서의 분야를 정확히 결정하기 위한 분야연상어의 구축은 중요한 연구과제이다. 미리 분야체계를 정의하고, 각 분야에 해당하는 문서를 인터넷이나 서적을 통해 수집한다. 본 논문은 수집 문서의 분야를 정확히 지시하는 분야연상어를 수집하는 방법을 제안한다. 문서의 분야결정 시점을 고려하여 분야연상어의 수준을 정하였다. 인도네시아어의 분야연상어 사전을 자동으로 구축하기 위해 먼저 한국어로 구축한 분야 연상 지식을 추출하는 방법을 제안한다.

AI 본문요약

엑셀 다운로드 AI-Helper

* AI 자동 식별 결과로 적합하지 않은 문장이 있을 수 있으니, 이용에 유의하시기 바랍니다.

• 연구 주제
• 연구 방법
• 연구 결과

문제 정의

• 2장에서는 분야연상어의 정의와 문서 분류방법에 대하여 설명하고, 문제점에 관하여 논의한다. 본 논문에서 제안하는 분야연상어 사전의 구축 방법에 관하여 서술한다. 마지막으로 3장에서는 결론과 향후의 연구 과제에 대하여 서술한다.
• 본 논문에서는 분야연상어를 정의하고, 단일어에 대한 분야연상어 정보를 이용하여 일상생활에서 끊임없이 생성되는 복합 분야연상어를 효율적으로 결정하는 방법으로 확장한다[1].
• 본 연구에서는 오랫동안 연구해 온 한국어의 분야연상어를 기반으로 인도네시아어의 문서를 자동으로 분류할 목적으로 사용하기 위한 분야연상어 사전의 자동 구축을 목표로 한다. 2장에서는 분야연상어의 정의와 문서 분류방법에 대하여 설명하고, 문제점에 관하여 논의한다.

제안 방법

• 웹(web) 추론이란 검색 엔진과 문서 분류를 이용해 단어 하나하나에 대해 분야를 자동으로 추정하는 방법이다. 본 연구자가 2006년도에 검색과 분류가 동시에 가능한 엔진을 설계하고 구현[7]하였으나 이후 웹 추론이란 새로운 전문용어가 만들어져 본 논문에서는 웹 추론이란 단어를 이용한다. 이 방법의 흐름도를 위의 (그림 4)에 제시하였다.
• 분야연상어 사전을 이용해 문서 내에 포함된 분야연상어를 전부 추출한다. 예를 들면 (그림 3)에 있는 문서에서 나타난 분야연상어를 밑줄 친 단어로 표시하였다.
• 분야연상어를 단일과 복합 분야연상어로 분류하여 단일 분야연상어를 형태소사전에 등록된 표제어와 일치하도록 한정하였다. 이것은 단일 분야연상어의 분야정보를 형태소 사전에 그대로 등록하기 위한 실용성을 고려한 것이다.
• 분야연상어 구축에는 분야 체계의 종단 분야마다 수집된 대규모의 문서를 학습 데이터로 이용한다. 학습 데이터에 대하여 형태소 해석을 하여 명사의 출현 빈도를 각각의 분야마다 계산한다. 그 후에 다음의 2.

대상 데이터

• 분야연상어 구축에는 분야 체계의 종단 분야마다 수집된 대규모의 문서를 학습 데이터로 이용한다. 학습 데이터에 대하여 형태소 해석을 하여 명사의 출현 빈도를 각각의 분야마다 계산한다.
• 분야연상어 후보를 검색 키워드로 하여 웹 검색 엔진으로부터 문서를 20건 취득한다. 이 문서는 요약문이다.

이론/모형

• 복수의 분야가 추출되었을 때 대처하는 방법은 단락 분할 방법[2]을 이용할 수 있다. 여기서 화제 분야의 출현과 화제 분야의 계속 혹은 전환 여부는 참고문헌 [4]를 참고하여 설계한 시스템을 참고 문헌 [6, 7]을 이용하였다. 또한 문서로부터 분야연상어가 전혀 추출되지 않았을 경우는 <분야 미정(field Neutral)>이라고 판정한다[2, 6].

성능/효과

• 이것은 단일 분야연상어의 분야정보를 형태소 사전에 그대로 등록하기 위한 실용성을 고려한 것이다. 또한, 본 연구에서는 분야체계를 미리 정의한다고 하였으나 분야연상어 구축은 어떠한 분야체계에도 손쉽게 적용될 수 있으므로 보편성은 충분하다. 덧붙여, 본 연구의 결과는 문서 분류를 위한 지식베이스로 이용할 수 있는데, 몇몇 단어를 분야연상어로 잘못 인식하거나 혹은 분야연상어를 일반 단어로 오인식하는 문제가 발생하여도 전체 시스템에는 영향을 주지 않으므로 결함 허용(fault tolerance) 능력이 있다.

본문요약 정보가 도움이 되었나요? 예 아니오 제출

질의응답

핵심어	질문	논문에서 추출한 답변
분야연상어의 구축	분야연상어의 구축은 어느면에서 중요한가?	인간은 문서전체를 읽지 않고 대표적인 단어를 보는 것만으로 정치나 스포츠 등의 분야를 정확히 인지할 수 있다. 문서 전체는 물론 부분 텍스트(단락)에 출현하는 소수의 단어 정보에서 문서의 분야를 정확히 결정하기 위한 분야연상어의 구축은 중요한 연구과제이다. 미리 분야체계를 정의하고, 각 분야에 해당하는 문서를 인터넷이나 서적을 통해 수집한다.
인간	인간의 인지능력은?	인간은 문서전체를 읽지 않고 대표적인 단어를 보는 것만으로 정치나 스포츠 등의 분야를 정확히 인지할 수 있다. 문서 전체는 물론 부분 텍스트(단락)에 출현하는 소수의 단어 정보에서 문서의 분야를 정확히 결정하기 위한 분야연상어의 구축은 중요한 연구과제이다.
문서를 분류한다는 것	문서를 분류한다는 것은 어떤 방법이 있는가?	문서를 분류한다는 것은 문서를 내용에 따라 주제별로 자동 분류하는 방법이다. 문서 분류 방법은 기계학습과 같이 통계적 방법을 이용하는 것이 주류이다. 그러나 통계적인 방법을 사용하기 위해서는 학습 데이터로 대량의 문서를 준비할 필요가 있고 문서 분류의 최종 결과도 매우 정확해야 한다[1]. 통계적 방법을 사용하지 않는 문서 분류방법 중의 하나로 분야연상어의 방법이 있다[3].

질의응답 정보가 도움이 되었나요? 예 아니오 제출

이 논문을 인용한 문헌

더보기