초록 ▼

연구개발 목표 및 내용
최종 목표
o 5G단말 연동 및 국내기술 AR 스마트글래스(ARG) 완제품, 디바이스 드라이버 및 SDK 개발
[Tethered방식, 100g미만 ARG 스마트글래스 3종 이상]
o End Product
- 5G단말 연동 ARG, 단안 Exy-ARG, 양안 Exy-ARG 글래스 완제품 3종 이상 (HW & SW)
- 눈동자추적, 카메라 드라이버, Depth ToF & IMU 6-DoF 디바이스 드라이버 및 SDK / example 소스 각 1종 이상 [시범 서비스 연계]

연구개발 목표 및 내용
최종 목표
o 5G단말 연동 및 국내기술 AR 스마트글래스(ARG) 완제품, 디바이스 드라이버 및 SDK 개발
[Tethered방식, 100g미만 ARG 스마트글래스 3종 이상]
o End Product
- 5G단말 연동 ARG, 단안 Exy-ARG, 양안 Exy-ARG 글래스 완제품 3종 이상 (HW & SW)
- 눈동자추적, 카메라 드라이버, Depth ToF & IMU 6-DoF 디바이스 드라이버 및 SDK / example 소스 각 1종 이상 [시범 서비스 연계]
- Unity 3D QR 및 이미지 기반 서비스 콘텐츠 SW 1종 이상
- 5G-MEC 연동 ARG 객체인식 AI 및 AR 기능 탑재 SW 플랫폼
* Exy : Exynose, DoF : Degree of Freedom, MEC : Mobile Edge Computing
전체 내용
1차년도
(1) 5G단말 연동의 5G-ARG 핵심기능 개발
- 5G단말 Add-on센서 USB구동 디바이스 드라이버 개발 (RGB, Thermal, Depth) 및 SDK개발
- 5G단말 시점추적 눈동자인식 카메라 드라이버 및 SDK
(2) 확장성 고려 단안용 Exy-ARG 핵심 요소기능 개발
- 단안 Exy-ARG 핵심기능 구조 설계
[국산 고성능 마이크로프로세스기반 5G통신의 Exy-ARG 단말]
- 단안용 Exy-ARG add-on 센서 USB 구동 디바이스 드라이버 개발 (RGB, Thermal, Depth) 및 SDK개발
- IMU를 이용한 3DOF 운동량 서비스 AR apk 개발
(4) 확장성 고려 양안용 Exy-ARG 핵심 요소기능 개발
- 양안 Exy-ARG 핵심기능 구조 설계
[국산 고성능 마이크로프로세스기반 5G통신의 Exy-ARG 단말]
- 양안용 Exy-ARG add-on 센서 USB 구동 디바이스 드라이버 개발 (RGB, Thermal, Depth) 및 SDK개발
(5) 5G-ARG / Exy-ARG 5G 전송 시험
- (5G-ARG 전송 및 Exy-ARG 5G동글 AR콘텐츠 전송시험
(6) 5G MEC 연동의 AR플랫폼 탑재
- 5G MEC 연동의 MEC내 증강현실처리 플랫폼 탑재 (Thin-Client구현, 실내-WiFi)
(7) 5G-ARG의 밧데리 저전력 구동 알고리즘 설계 및 구현
- 5G단말 밧데리 ARG 저전력 알고리즘 기능설계
(8) 특정사업화 적용의 실증 및 시험지원
- 5G단말/Exy-ARG 구동 개발자용 QR 코드기반 AR apk 개발
(9) 화각60도이상의 디스플레잉 글래스 및 광각모듈
- Freefoam 프리즘 커플러 방식 경량 광각 AR글라스 광학 모듈 광학설계 및 제작
- Full HD 마이크로 디스플레이/Dual RGB Camera /TOF (Depth Camera) 구성에 의한 6DOF AR 영상 구동 성능 최적화 (HW)
(10) 특정사업화(현장생산제조)에 적용이 가능한 Exy-ARG 실증 및 호환성 검증
- 국내 스마트 팩토리 적용 제조 업체 대상 AR 글라스 적용 시나리오 발굴
- 특화 AR 어플리케이션 기능 맞춤형 HW 최적화
(11) 특정사업화(건설)에 적용이 가능한 Exy-ARG 설계 및 제작
- 단안 Exy-ARG 구조 설계 및 제작 [국산 고성능 마이크로프로세스기반 5G 통신의 Exy-ARG 단말]
(12) 5단말-인터페이스 Hub-ARG의 인터페이스Hub 개발
- 5G단말 Tethered 방식에 적합한 ARG의 마이크로디스플레이, 카메라, 기타 add-on 센서 등의 인터페이싱이 가능한 Interface-Hub 개발
- 동글 형태의 스마트폰 미러링 출력기 워킹샘플 개발 (예 eDP to HDMI 변환 등)
(13) 확장성 고려 단안용 Exy-ARG 고성능 전용회로보드를 설계 및 제작
- 단안 Tethered 방식용 Exy-ARG 고성능 전용 보드 개발 (Android OS, HDMI, USB 등)
(14) Unity 3D 등 콘텐츠 개발 도구를 이용하여 원격제어 솔루션 개발
- 메뉴얼 콘텐츠 개발 대상 선정 및 자료확보
(15) QR 및 이미지 기반 QR 코드 및 이미지 인식용 디바이스 드라이버(SDK) 및 AR 작업 지원 콘텐츠 개발
- 메타 데이터 정의, 메타 데이터 연동구조도 설계
- 확보된 3D CAD 데이터 경량화
(16) 특정사업화 (건설)에 적용이 가능한 5G-ARG/Exy-ARG의 실증
- AR 현장 작업 매뉴얼 콘텐츠 개발

2차년도
(1) 5G단말 연동의 5G-ARG 핵심기능 개발
- 5G단말 Tethered방식 Interface-Hub 시범 시험검증
(2) 확장성 고려 단안용 Ex-ARG 핵심 요소기능 개발
- 단안 Exy-ARG 핵심기능 구조 설계 고도화 [국산 고성능 마이크로프로세스 기반 5G통신의 Ex-ARG 단말]
- IMU를 이용한 6DOF 운동량/자세 서비스 AR apk 고도화 개발
(4) 확장성 고려 양안용 Ex-ARG 핵심 요소기능 개발
- 양안용 Exy-ARG 5G단말 연동 안드로이드 플랫폼 커널 드라이버 라이브러리 디버깅 고도화
- IMU를 이용한 6DOF 운동량/자세 서비스 AR apk 고도화 개발
(5) 5G-ARG / Ex-ARG 5G 전송시험
- 5G-ARG 전송 및 /Exy-ARG 5G동글 AR콘텐츠 전송 시범시험 지원
(6) 5G MEC 연동의 AR플랫폼 탑재
- 5G MEC 연동의 MEC내 증강현실처리 플랫폼 탑재 (Thin-Client구현, 실외-5G)
(7) 5G-ARG의 밧데리 저전력 구동 알고리즘 설계 및 구현
- 5G단말 밧데리 ARG 저전력 알고리즘 기능 구현
(8) 특정사업화 적용의 실증 및 시험 지원
- 5G-MEC 기반 마이크로 서비스 슬라이싱 시험구현 지원
(9) 화각60도이상의 디스플레잉 글래스 및 광각모듈 개발
- 저분산 광학 플라스틱 소재 적용에 의한 모듈 경량화
- DOE 구조체 도입에의한 광학계 화각 60도 이상 확대
- 2K 급 OLED 마이크로디스플레이 적용에 의한 AR 영상 고화질화
(10) 특정사업화(현장생산제조)에 적용이 가능한 Ex-ARG 실증 및 호환성 검증
- 특화 AR 어플리케이션 기능 맞춤형 제품 구성
- 6DOF 지원 실시간 랜더링 센서, 카메라 기능 최적화
- Thermal Camera 적용 열화상 감지 기능 확보
- 산업현장에서의 실증테스트 진행
(11) 특정사업화(건설)에 적용이 가능한 Exy-ARG 설계 및 제작
- 건설현장 특화 안전모 장착형 스마트글라스 거치 기구물 제작
(12) 대중이 쉽게 체험할 수 있는 사업화 전시
- 스마트 글라스 제품 체험관 구성, 국내외 전시회 참여 또는 개최 (COEX, Kintex)
(13) 5단말-인터페이스Hub-ARG의 인터페이스Hub 개발
- 5G단말 Tethered 방식 Interface-Hub 고도화
(14) 확장성 고려 단안용 Exy-ARG 고성능 전용회로보드를 설계 및 제작
- 단안 Tethered 방식용 Exy-ARG 고성능 전용 보드 엔지니어 셈플, 프리프로덕션 샘플 생산 및 최종 검증
(15) 확장성 고려 양안용 Ex-ARG 고성능 전용회로보드를 설계 및 제작
- Exy-ARG 고성능 전용보드 개발 (Android OS, HDMI 4K 출력)
- Exy-ARG 고성능 전용보드 개발 (Android OS, MIPI-DSI/HDMI 4K 출력) 워킹 샘플, 엔지니어 셈플, 프리프로덕션 샘플 생산 및 최종 검증
(16) Unity 3D 등 콘텐츠 개발도구를 이용하여 원격제어 솔루션
-원격제어 솔루션 드라이버개발
-3D CAD 모델별 경량화 LoD (Level of Detail) 수준 확립
(17) QR 및 이미지기반 QR 코드 및 이미지 인식용 디바이스 드라이버(SDK) 및 AR 작업 지원 콘텐츠 (SW) 개발
- QR코드 및 이미지 인식 기반 SDK 개발
- 3D CAD 모델을 AR 콘텐츠 제작 도구인 VIRNECT Make 적용
- 확보된 콘텐츠 기획안 바탕으로 AR 매뉴얼 콘텐츠 개발
(18) 특정사업화
(건설)에 적용 가능 5G-ARG /Exy-ARG 실증
- 특정 사업화 (건설) 결과물 현장 실증 및 사용자 의견수렴
(19) 대중이 쉽게 체험할 수 있는 사업화 전시
- 일반 국민 체감 공동체험 부스 및 전시에 체험전 및 사용자 의견수렴 (콘텐츠 별도) 지원

연구개발성과
o 연구개발 결과물
- 5G단말 연동 ARG,
- 단안 Exy-ARG / 양안 Exy-ARG 글래스 완제품 3종 이상 (HW & SW) [2Ghz, HD급, 100g이하]
- 눈동자추적, 카메라 드라이버, Depth ToF & IMU 6-DoF 디바이스 드라이버 및 SDK / example 소스 각 1종 이상 [시범 서비스 연계]
- Unity 3D QR 및 이미지 기반 서비스 콘텐츠 SW 1종 이상 [제조, 건축, 사무에 실증]
- 5G-MEC 연동 ARG 객체인식 AI 및 AR 기능 탑재 SW 플랫폼

연구개발성과 활용계획 및 기대 효과
o 활용계획
- 국내 증강현실 콘텐츠 제작 국내 1위 기업의 차별화 기술이 적용된 특정사업화 (건설)에 적용이 가능한 5G-ARG/Exy-ARG의 실증을 통한 건설 산업분야 서비스에 활용 가능
- 특정사업화 (제조)에 적용이 가능한 5G-ARG/Exy-ARG의 실증을 통한 반도체 생산현장의 산업분야 서비스에 활용 가능
- 기타로 비대면 비즈니스의 일종인 “사무”를 위한 MEC 연동의 초고속 이동형 다자간 화상회의 시스템으로 활용이 가능

(출처 : 요약문 4p)