한빛소프트 반기보고서 (2024.06)
6. 주요계약 및 연구개발활동

가. 경영상의 주요계약

계약 상대방	항목	내용

(주)월송홀딩스	체결시기	2021년 08월 27일

목적 및 내용	자산매각을 통한 재무구조 개선 및 개발투자자금 확보(205억)

(주)한빛드론	체결시기	2021년 12월 20일

목적 및 내용	주주배정 유상증자

KB증권 외 6개사	체결시기	2023년 03월 24일

목적 및 내용	자금 유동성 확보 및 채무상환 목적으로 100억 전환사채 발행

나. 연구개발활동(1) 연구개발 담당조직

당사는 연구개발 활동을 담당하는 부설연구소를 운영하고 있습니다. 명칭은 "한빛소프트 게임개발연구소"이며, 게임개발, 가상현실, 인공지능 및 관련 제반 기술에 대한 연구를 하고 있습니다.

(2) 연구개발비용(단위: 천원)

과 목	제26기 반기	제25기	제24기	비 고

연구개발비용 계	566,823	2,804,507	552,475	-

연구개발비 / 매출액 비율[연구개발비용계÷당기매출액×100]	3.23%	10.82%	0.98%	-

상기 자료 중 매출액은 연결재무제표 기준입니다. (3) 연구개발실적

연구과제	연구개발내용	연구결과 및 기대효과

음성 합성 및 자연어 이해 솔루션	VoiceGen 프로젝트	- 타코트론2(Tacotron2) 및 뉴럴 보코더(Neural Vocoder) 기술 연구를 통한 딥러닝 멀티 보이스 모델 솔루션 구축- 40분 분량의 녹음 음성 데이터를 통한 음성 합성 가능- 7감정(분노, 역겨움, 공포, 행복, 슬픔, 놀람, 일반)이 담긴 목소리 합성을 통한 페르소나(Persona) 구현- 특정 도메인에 특화된 챗봇(Chat-bot) 제작을 통하여 다양한서비스 환경에서 활용 가능한 솔루션 구축- 일렉트라(Electra) 및 GPT 모델을 활용한 욕설 및 보이스피싱 방지 자연어 이해 모델 제작 및 솔루션 구축- 자유로운 음성합성 모델 사용을 위한 Web 프로젝트인 VoiceGen 제작 중- 도커(Docker)와 에어플로우(Airflow)를 활용하여 데이터 전처리, 인공지능 모델 학습, 배포에 이르는 전체 파이프라인 구축, 쿠버네티스(Kubernetes)를 통한 모듈화 및 최적화 개선 작업 진행 중- 음성 합성 연동 디지털 휴먼 립싱크 기술 개발 중- Style GAN을 활용하여, 음성의 Mel Spectrogram을 이미지처럼 학습하여 감정을 담은 목소리를 합성 하는 연구 진행 중

AI 음성 적용을 위한 생성형 AI 캐릭터 이미지 개발과 서비스 개발	- AI 음성에 맞는 캐릭터 이미지를 생성하기 위해 Adobe Firefly2를 사용- 생성형 AI 캐릭터 이미지를 텍스트화 하여 프롬프트를 통해 이미지를 생성- 감정 표현이 가능한 10종의 음성은 감정이 담긴 캐릭터가 필요하여 추가 개발- AI 음성 생성과 이용에 대한 컨셉을 적용한 웹페이지 디자인 제작

ChatGPT AI 보이스	- ChatGPT API 연동하여 AI 보이스 서비스 개발 진행 중- VoiceGen 7감정(분노, 역겨움, 공포, 행복, 슬픔, 놀람, 일반)이 담긴 목소리 합성 제공

광학 문자인식 솔루션	한글 및 영어 문자 인식 인공지능 모델 제작	트랜스포머(Transformer) 기반의 기술 연구를 통한 광학 문자 인식(Optical Character Recognition, OCR) 모델 솔루션 구축,Transformer에 기초한 매우 효과적인 한글 텍스트 인식 방법을 개발,- 영문, 한글, Transformer 적용 방법에 따른 구분 등 4개의 벤치마크 데이터셋 실험 에서 영문, 한글 99%의 놀라운 성과달성,Multi Language 적용 가능성을 보여줌,Robustness to Scale Variance 가능한 모델로 상대적으로 작은 receptive field만으로도 단일 character에 대해 커버,Transformer의 공간적 학습 능력으로 글자체 환경 여건에 따른 인식 수준에 따른 분석이 가능함,향후 글자체 크기, 모호성, 구부러짐, 기울어짐, 손 글씨 등의 보완적 연구 기틀을 마련함

한국수화언어 통역 솔루션	한국어 수화언어인식 인공지능 모델 제작	한국수화언어 통역 시스템은 한국수화언어 특징 추출 모듈과 한국수화언어 통역 모듈로 구성됨,한국수화언어 특징 추출 모듈은 객체 검출 모듈로, 손과 손가락 모양인 수형의 종류 및 얼굴 종류의 확률과 위치 정보를 추출함,한국수화 언어 특징 추출 모듈은 한국수화언어 특징을 71개의 클래스로 분류하여 검출 할 수 있음,- 연산량은 0.615 BFLOPS로, CPU 연산을 사용한 객체 검출 소요 시간은 75ms임. - 한국수화언어 특징 추출 모듈 정확도 성능은 mAP(mean Average Precision) 94.02%, F1-score 87%, 평균 IoU 61.24%임. - 한국수화언어 특징 추출 모듈 크기는 6.92MB로 경량화된 모듈임.한국수화언어 통역 모듈은 한국수화언어 특징 추출 모듈을 사용하여 추출된 정보를 바탕으로 한국수화언어 중 자연수화언어 동작(단어)을 통역하는 모듈임. - 평가 데이터 1,760개로 평가 시 95.85%로 도출됨한국수화언어 통역 App은 멀티스레드 기법을 적용하면 CPU 연산 사용 시 한국수화언어 통역에서 출력까지 25ms 소요 되며, 28 FPS의 성능 보임,이는 실시간으로 한국수화언어 통역이 가능한 성능이라 평가됨.

XR 플래그십 프로젝트,소방안전관리자용 화재 초기 대응력 향상 시스템	XR기반 소방시설 점검작동 시뮬레이션 시스템 개발	- 점검작동 시뮬레이터 12종에 대한 상세기능, 터치 개선, 사용자 편의성 기능 추가 등의 기능 고도화 작업- 점검작동 시뮬레이터 12종에 대하여 검수기관의 피드백사항인 모델링 변경, 텍스트 오류, 음성 변경, 콘텐츠 추가 연출 등의 수정을 진행- 점검작동 시뮬레이터의 자동화재탐지설비 R형, 자동화재 탐지설비 P형 도통시험, 시연콘텐츠를 추가 개발- 점검작동 시뮬레이터 PC버전 1종 (자동화재탐지설비 P형) 설명서UI, 콘텐츠종료UI, 조작법UI와 같은 편의성 기능을 추가하여 개발- 최신 HMD 메타 퀘스트 프로 HMD용 1종(시연버전)개발하고, 해당 장비의 조작방법을 어려워하여 터치로만 진행 할 수 있도록 고도화를 진행

XR 기반화재대응 교육훈련 시뮬레이션 시스템	- 화재 대응 훈련에 사용할 시나리오 편집기능을 가진 저작도구의 고도화를 진행, 건물 층수, 외벽제거, 2D 맵뷰어, 시나리오 정보확인, 시나리오 흐름진행 확인, 데이터 추출, 화원관리, 인원정보, 플레이어 시작위치등의 기능 개발- 저작도구에서 제공하는 시나리오 신규(다중이용시설, 복합건출물, 노유자시설, 지하상가 각2종) 8종 개발- 저작도구에서 제공하는 캐릭터, 오브젝트 모델링, 건물 모델링 개발

가상융합기술 기반 재난대응 교육훈련 플랫폼 개발	가상융합기술 기반 재난대응 교육훈련 플랫폼	- 최신 HMD인 메타 퀘스트 프로용 프로토타입을 개발, 해당 콘텐츠는 화재 발생의 대처를 위하여 사용자 직접 컨트롤러를 사용하여 건물 내부를 이동하며 화재 대응법에 대한 기본적인 기능 체험- 가상융합기술 기반 재난대응 교육훈련 플랫폼의 개발 위한 에셋(Runtime Handler,Touch Camera,Object Grab) 연구

드론 탐지 통합 플래폼	드론 탐지통합 플래폼	안티드론 통합 시스템- 에어로스코프 하드웨어 및 소프트웨어 개발 키트(SDK)를 활용한 드론 탐지 시스템- 에어로스코프 WEB SDK기반 API 및 라이브러리 제공- 드론 탐지 소형 레이더, RF스캐너, 카메라 장비와 연동하여 통합 안티드론 시스템 구축

드론 활용 솔루션	채수기능 드론 제어 S/W	드론장착형 채수장치 제어 소프트웨어- 스마트워터 그리드와 연계한 스마트 물관리 솔루션 개발 로 스마트시티 핵심 구성 분야 기술 확보- 수자원 관리 분야에 특화된 드론 자율 비행 관리 기능- 채수 드론을 활용하여 휴대용 자동 수질 관측 시스템 개발