초록 ▼

□ 연구개발 목표 및 내용
◼ 최종 목표
• 빅데이터 기반 지능형 R&D 정보서비스 플랫폼 구축을 통해 ScienceON, NTIS 등 KISTI 주요서비스의 R&D 정보 활용 체계 완성

◼ 전체 내용
• 정책/기획/연구를 위한 현안별 R&D 데이터 분석 및 자동화 요소 도출
- 국가 현안에 대한 기술적 분석을 통한 정책/기획결과 제안
- 지능형 R&D 정보처리 패키지 개발을 위한 데이터, 추출 대상, 자동화 요소 도출
• R&D 정보처리 지능형 모델 개발 및 R&D학습데이터 구축

□ 연구개발 목표 및 내용
◼ 최종 목표
• 빅데이터 기반 지능형 R&D 정보서비스 플랫폼 구축을 통해 ScienceON, NTIS 등 KISTI 주요서비스의 R&D 정보 활용 체계 완성

◼ 전체 내용
• 정책/기획/연구를 위한 현안별 R&D 데이터 분석 및 자동화 요소 도출
- 국가 현안에 대한 기술적 분석을 통한 정책/기획결과 제안
- 지능형 R&D 정보처리 패키지 개발을 위한 데이터, 추출 대상, 자동화 요소 도출
• R&D 정보처리 지능형 모델 개발 및 R&D학습데이터 구축
※ R&D 정보처리를 위한 R&D 과제 정보 요약 모델, R&D 정보 주요 키워드 추출 모델, R&D 정보 개체명 인식 모델, 의도기반 지능형 R&D 정보 검색 모델, 내용기반 R&D 과제 및 논문 간 관계 예측 모델, 연구 동향 분석을 위한 R&D 정보 주요 키워드 트렌드 추출 모델 등
• ScienceON, NTIS 등 KISTI 주요서비스에 활용 지원
- ScienceON, NTIS 등 KISTI 주요서비스에 R&D정보 활용을 위한 R&D 정보처리 지능형 모델 및 학습데이터셋 제공
- R&D 정보처리 지능형 모델 활용 시나리오 제공
※ 연구자 생애주기별 맞춤형 서비스, 이용자 의도기반 R&D정보 검색(ODQA) 서비스, 키워드 중심 R&D 트렌드 추출 서비스, 고객 중심 맞춤 정보 추천 서비스, 이용자 관심분야별 R&D 요약 서비스 등

◼ 1단계
❏ 목표
• 빅데이터 기반 지능형 R&D 정보서비스 플랫폼 구축을 통해 ScienceON, NTIS 등 KISTI 주요서비스에 R&D 정보 활용 체계 기반 구축
- R&D 과제 정보 요약 모델, 키워드 추출 모델 개발 및 활용
❏ 내용
• R&D 정보처리 지능형 모델 개발 및 R&D학습데이터 구축
※ R&D 현황 파악을 위한 주요 키워드 추출 모델, 기관명 인식을 위한 개체명 인식 모델등
• ScienceON, NTIS 등 KISTI 주요서비스에 활용 지원
- ScienceON, NTIS 등 KISTI 주요서비스에 R&D 정보 활용을 위한 R&D 정보처리 지능형 모델 및 학습데이터셋 제공
- R&D 정보처리 지능형 모델 활용 시나리오 제공
※ 연구자 생애주기별 맞춤형 서비스 등

◼ 2단계
❏ 목표
• 근거 기반 과학기술 정책 수립 및 데이터 기반 사업 기획 등 R&D 데이터 기반 의사결정을 지원하는 빅데이터 기반 지능형 R&D 정보처리 패키지 개발
- R&D 개체명 인식 응용 기술, R&D 의도기반검색 응용 기술
❏ 내용
• 정책/기획/연구를 위한 현안별 R&D 데이터 분석 및 자동화 요소 도출
- 국가 현안에 대한 기술적 분석을 통한 정책/기획결과 제안
- 지능형 R&D 정보처리 패키지 개발을 위한 데이터, 추출 대상, 자동화 요소 도출
• R&D 정보처리 패키지 개발 및 R&D학습데이터 구축
※ R&D 개체명 인식 응용 기술, R&D 의도기반검색 응용 기술 등
• NTIS 서비스 내 R&D 정보처리 패키지 적용 및 데이터 개방
- NTIS 분석서비스, 이슈로보는R&D 등 NTIS 서비스 대상 지능형 패키지 적용
- NTIS, DataON, AIDA 등 KISTI 주요 서비스를 통한 학습데이터 공개
- R&D 분석데이터 구축 및 개방

◼ 3단계
❏ 목표
• 근거 기반 과학기술 정책 수립 및 데이터 기반 사업 기획 등 R&D 데이터 기반 의사결정을 지원하는 빅데이터 기반 지능형 R&D 정보처리 패키지 개발
- 내용기반 관계 예측 응용 기술, 트랜드 추출 응용 기술
❏ 내용
• 정책/기획/연구를 위한 현안별 R&D 데이터 분석 및 자동화 요소 도출
- 국가 현안에 대한 기술적 분석을 통한 정책/기획결과 제안
- 지능형 R&D 정보처리 패키지 개발을 위한 데이터, 추출 대상, 자동화 요소 도출
• R&D 정보처리 패키지 개발 및 R&D학습데이터 구축
※ 내용기반 과제 및 논문 간 관계 예측 응용 기술, 연구동향 분석을 위한 주요 키워드 트랜드 추출 응용 기술 등
• NTIS 서비스 내 R&D 정보처리 패키지 적용 및 데이터 개방
- NTIS 서비스 대상 지능형 패키지 적용
- NTIS, DataON, AIDA 등 KISTI 주요 서비스를 통한 학습데이터 공개
- R&D 분석데이터 구축 및 개방

□ 연구개발성과
< 정량 성과 >
• 빅데이터 기반의 R&D 정보처리 지능형 모델 개발 (연도별 1종씩 총 6종)
• 빅데이터 기반의 R&D 정보처리 지능형 모델 6종의 정확도 목표 달성
※ 모델별 정확도 목표 :
· R&D 과제정보요약모델정확도45.4 (ROUGE-1 기준) 이상
· R&D 정보 주요 키워드 추출 모델 0.23 (Precision@10 기준) 이상
· R&D 정보 개체명 인식 모델 56.1(F1 기준) 이상
· 의도기반 지능형 R&D 정보 검색 모델 45.6(F1) 또는 36.9(EM) 이상
· 내용기반 R&D 과제 및 논문 간 관계 예측 모델 0.62(Hits@10 기준) 이상
· 연구동향분석을위한R&D 정보주요키워드트렌드추출모델0.23 (Precision@10 기준) 이상
< 정성 성과 >
• 빅데이터 기반 지능형 R&D 정보서비스 기반 마련
• 근거 기반 과학기술정책 수립 및 과학기술 정책 과학화에 필수적인 R&D 현황 정보 집계 지원
• 데이터 기반 사업 기획 및 기술 시장 파악 지원

□ 연구개발성과 활용계획 및 기대 효과
• NTIS 서비스의 지능형 기능 강화를 통한 사용자 만족도 향상에 기여
• R&D 정보처리 지능형 모델 및 학습데이터셋 제공을 통한 ScienceON, NTIS 등 KISTI 주요서비스에 활용
• 자체 지능형 R&D 정보서비스 요소기술 개발 및 모듈화를 통한 오픈사이언스 강화 및 R&D정보의 효과적인 제공에 기여
• R&D 정보처리 지능형 모델 개발을 통한 국가R&D정보의 공유·융합·협력 지원

(출처 : 요약문 4p)

Abstract ▼

Ⅳ. Results
○ Quantitative achievements
- We demonstrate excellence through fair performance evaluation and model disclosure of R&D-specialized AI models
- The R&D-specialized NER model achieves F1 80.0 in the R&D documents NER task, 142.6% of the target (F1 56.1)
- For the first time in

Ⅳ. Results
○ Quantitative achievements
- We demonstrate excellence through fair performance evaluation and model disclosure of R&D-specialized AI models
- The R&D-specialized NER model achieves F1 80.0 in the R&D documents NER task, 142.6% of the target (F1 56.1)
- For the first time in Korea, a generative AI model specialized in R&D was developed and the model was released on Huggingface
- We demonstrate the objective excellence of technology through 5 program registrations, 5 academic journals including SCI, and 5 academic conference presentations.
○ Qualitative achievements
- We developed R&D-specialized AI models and improved NTIS intelligent service quality by appying the models to NTIS.
- Performance of extracting critical information in user queries is improved by applying R&D-specialized NER model to NTIS chatbot(ND)
- Accessibility of R&D information for NTIS users is improved by providing technical information Q&A function to NTIS Chatbot (ND). The function is based on R&D-specialized generative AI model (KoRnDAlpaca)
- Support the utilization of core KISTI services and digital transformation
- Support for popularization of science and technology.
· Support the general public to easily access national R&D information.
· Support for fast retrieval of science and technology information.
- Support digital transformation
· Provide R&D datasets and models for machine learning in the field of science and technology.
· Provide a national data and AI-based R&D research environment.

(source : Summary 9p)

목차 Contents

• 표지 ... 1
• 제 출 문 ... 2
• 연차보고서 초록 ... 3
• 요 약 문 ... 4
• Summary ... 7
• Contents ... 11
• 목차 ... 13
• 표목차 ... 15
• 그림목차 ... 16
• 1. 연구개발과제의 개요 ... 17
• 가. 연구개발 최종 목표(2021-2026 기준) ... 17
• 나. 국내·외 기술개발 현황 ... 17
• 다. 단계별 연구개발 로드맵 ... 19
• 라. 단계별 연구개발과제 목표 및 내용 ... 20
• 1) 성과지표 및 연차별 목표 ... 20
• 2) 2023년 성과지표 달성도 ... 20
• 마. 전략목표(대과제)-성과목표(중과제)-성과지표(세부과제) 성과 연계도 ... 21
• 바. 추진전략 및 협력 네트워크 ... 21
• 사. 2023년 대표성과 ... 22
• 아. 2023년 실적 및 2024년 계획 ... 23
• 2. 연구개발과제의 수행 과정 및 수행 내용 ... 24
• (1) 빅데이터 플랫폼 기반 R&D 정보처리 지능형 기술 개발 ... 24
• (2) 빅데이터 플랫폼 기반 R&D 정보처리 지능형 기술 정확도 ... 28
• (3) 국가과학기술지식정보서비스(NTIS)의 지능형 서비스 강화를 위한 AI 기술 로드맵 수립 ... 32
• 3. 연구개발과제의 수행 결과 ... 38
• 가. 정성적 연구개발성과 ... 38
• 나. 정량적 연구개발성과 ... 39
• 다. 계획하지 않은 성과 및 관련 분야 기여사항 ... 45
• 4. 연구개발성과의 관련 분야에 대한 기여 정도 ... 46
• 5. 연구개발성과의 관리 및 활용 계획 ... 47
• 가. 연구데이터 관리계획(DMP) 추진실적 ... 48
• 6. 참고문헌 ... 49
• 끝페이지 ... 51