초록 ▼

□ 연구개발 목표 및 내용
◼ 최종 목표
○ 국가 연구개발사업 평가 체계 및 임무지향* R&D 사업 특징을 살펴보고 연구개발 사업 및 과제의 효율적 지원 체계 방안 모색
○ 현재 기구축 된 데이터 기반 플랫폼현황 및 관련 기술 동향 조사를 통해 데이터를 평가에 적용한 사례 및 유사사례 조사 등 데이터 기반 신규 평가 지원체계 구축 가능성 검토
○ 인공지능 기술을 활용한 평가지원 방안 제시 및 시범 분석을 통한 인공지능 기술의 국가연구개발사업 평가 지원 체계 적용 가능성 모색

◼ 전체 내용
○

□ 연구개발 목표 및 내용
◼ 최종 목표
○ 국가 연구개발사업 평가 체계 및 임무지향* R&D 사업 특징을 살펴보고 연구개발 사업 및 과제의 효율적 지원 체계 방안 모색
○ 현재 기구축 된 데이터 기반 플랫폼현황 및 관련 기술 동향 조사를 통해 데이터를 평가에 적용한 사례 및 유사사례 조사 등 데이터 기반 신규 평가 지원체계 구축 가능성 검토
○ 인공지능 기술을 활용한 평가지원 방안 제시 및 시범 분석을 통한 인공지능 기술의 국가연구개발사업 평가 지원 체계 적용 가능성 모색

◼ 전체 내용
○ 평가 및 임무지향 혁신정책과 R&D 사업의 특징 파악
○ 데이터 기반 신규 평가 방법 조사
○ 국내 데이터 기반 플랫폼 현황 조사
○ 데이터 기반 신규 평가방법의 적용 가능성 모색
○ 데이터 기반 신규 평가방법의 임무지향 R&D 사업 시범적용

□ 연구개발성과
○ 전략계획서 및 자체평가 보고서에 대한 유사도 분석, 뉘앙스 분석을 통해 AI 기술의 국가연구개발사업 지원 가능성 제시
- 전략계획서의 유사도 분석을 통해 사업기획 내용의 전략계획서 반영의 충실도 판단 가능성 제시
- 자체평가 보고서의 뉘앙스 분석을 통해 평가결과의 객관성 및 신뢰성 예측을 지원 가능성 제시
○ 개발된 AI 기술 고도화를 통해 향후 국가연구개발사업 전반에 적용 가능한 평가지원시스템 구축
- 23년 국가연구개발사업 평가 전반에 적용 가능한 모델의 기반을 구축하고 24년 실제 평가에 적용하는데 기여할 수 있을 것으로 기대

□ 연구개발성과 활용계획 및 기대 효과
○ 본 연구로 개발된 데이터기반, AI툴을 활용하여 2023년도에 AI를 활용한 평가지원시스템 구축의 신규 본과제를 추진을 위한 추진방향을 제시할 예정으로 향후, 성과평가에 실제로 반영하는 것으로 목표로 한 사전 연구 성격으로 진행하였으며, 도출된 평가지원시스템 모델, 시사점과 개선사항 등이 차년도 본과제 추진 및 향후, 실제 사업평가에 적용하는데 기여할 것으로 기대
○ 또한 본 과제를 통해 국가연구개발사업 평가시스템의 전환을 진행할 경우 향후 평가의 효율성 및 객관성 제고, 평가의 전문성 강화라는 것이 각각 연계되어 국가전략기술 및 임무지향 R&D 관련 사업평가 뿐 아니라 특정평가 등 다양한 평가방식에 적용 가능할 것으로 판단
○ 피평가자인 부처에서도 본 시스템을 활용할 경우 평가에 대한 피평가자의 평가전문성과 국가연구개발사업 평가시스템에 대한 수용성이 제고될 것으로 기대

(출처 : 요약서 7p)

목차 Contents

• 표지 ... 1
• 제 출 문 ... 3
• 최종보고서 ... 5
• 요 약 서 ... 7
• 요 약 문 ... 9
• 목차 ... 13
• 표목차 ... 15
• 그림목차 ... 17
• Ⅰ. 서론 ... 19
• 제1절 연구 배경 및 필요성 ... 19
• 제2절 연구 목표 및 내용 ... 20
• 1. 연구 목표 ... 20
• 2. 연구 내용 ... 20
• Ⅱ. 평가 및 임무지향 혁신정책과 R&D 사업 특징 ... 22
• 제1절 국가연구개발사업 평가 관련 정책 및 제도 ... 22
• 1. 국가연구개발사업 성과평가 관련 법령에서의 평가 핵심가치 ... 22
• 2. 국가연구개발사업 성과평가 정책변화 ... 24
• 제2절 임무지향 추진현황 ... 26
• 1. 임무지향 R&D의 동향 ... 26
• 2. 임무지향 R&D 사업 현황 및 방향 ... 29
• Ⅲ. 데이터 기반 신규 평가방법 ... 36
• 제1절 데이터 타입별 인공지능 기술 종류 및 활용 현황 ... 36
• 1. 텍스트 데이터 처리 ... 37
• 2. 수치 데이터 처리 ... 43
• 제2절 주요 인공지능 기술 평가 방법 ... 49
• 1. 분류 (Classification) ... 49
• 2. 객체 검출분류 (Object Detection) ... 49
• 제3절 인공지능 기술 활용 사례 ... 51
• 1. 국내 ... 51
• 2. 해외 ... 53
• 제4절 AI 기반 평가 ... 57
• 1. AI 기반 R&D평가지원시스템 도입의 필요성 ... 57
• 2. AI 기반 정책 및 평가시스템의 활용 ... 57
• 제5절 국내 데이터 기반 성과관리 플랫폼 현황 ... 65
• 1. 국가과학기술지식정보서비스(NTIS) ... 65
• 2. 국가연구개발사업 조사･분석 ... 72
• 3. K2Base(KISTEP Knowledge Base: 과학기술정책지원서비스) ... 74
• 제6절 데이터 기반 신규 평가방법의 적용 가능성 ... 77
• 1. 국내 R&D 주요 평가체계 ... 77
• 2. 국내 R&D 평가체계 적용 방안 ... 85
• Ⅳ. 데이터 기반 신규평가방법의 임무지향 R&D 사업 시범 적용 ... 113
• 제1절 임무지향 R&D 사업의 AI 평가 지원 체계 적용 ... 113
• 제2절 시범 분석 방법 및 결과 ... 113
• 1. 분석 대상 및 과정 ... 113
• 2. 분석 결과 ... 114
• Ⅴ. 결론 ... 117
• 참고문헌 ... 120
• 끝페이지 ... 123