지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
초록· 키워드
오류제보하기
멀티모달 (multi-modal) 생성이란 텍스트, 이미지, 오디오 등 다양한 정보를 기반으로 결과를 도출하는 작업을 말한다. AI 기술의 비약적인 발전으로 인해 여러 가지 유형의 데이터를 종합적으로 처리해 결과를 도출하는 멀티모달 기반 시스템 또한 다양해지는 추세이다. 본 논문은 음성과 텍스트 인식을 활용하여 인물을 묘사하면, 몽타주 이미지를 생성하는 AI 시스템의 개발 내용을 소개한다. 기존의 몽타주 생성 기술은 서양인들의 외형을 기준으로 이루어진 반면, 본 논문에서 개발한 몽타주 생성 시스템은 한국인의 안면 특징을 바탕으로 모델을 학습한다. 따라서, 한국어에 특화된 음성과 텍스트의 멀티모달을 기반으로 보다 정확하고 효과적인 한국형 몽타주 이미지를 만들어낼 수 있다. 개발된 몽타주 생성 앱은 몽타주 초안으로 충분히 활용가능하기 때문에 기존의 몽타주 제작 인력의 수작업을 획기적으로 줄여줄 수 있다. 이를 위해 한국지능정보사회진흥원의 AI-Hub에서 제공하는 페르소나 기반 가상 인물 몽타주 데이터를 활용하였다. AI-Hub는 AI 기술 및 서비스 개발에 필요한 인공지능 학습용 데이터를 구축하여 원스톱 제공을 목적으로 한 AI 통합 플랫폼이다. 이미지 생성 시스템은 고해상도 이미지를 생성하는데 사용하는 딥러닝 모델인 VQGAN과 한국어 기반 영상생성 모델인 KoDALLE 모델을 사용하여 구현하였다. 학습된 AI 모델은 음성과 텍스트를 이용해 묘사한 내용과 매우 유사한 얼굴의 몽타주 이미지가 생성됨을 확인할 수 있다. 개발된 몽타주 생성 앱의 실용성 검증을 위해 10명의 테스터가 사용한 결과 70% 이상이 만족한다는 응답을 보였다. 몽타주 생성 앱은 범죄자 검거 등 얼굴의 특징을 묘사하여 이미지화하는 여러 분야에서 다양하게 사용될 수 있을 것이다.
목차
요약
1. 서론
2. 관련 연구
3. 멀티모달 기반 몽타주 생성 AI 개발
4. 실험 결과
5. 결론
References
ABSTRACT
참고문헌 (0)
참고문헌 신청이 논문과 함께 이용한 논문
생성형 AI를 활용한 UI/UX 디자인 프로세스의 교수학습방법 개선방안 연구
이수연
한국컴퓨터정보학회 학술발표논문집
2024
.07
이미지 생성형 AI의 정서 표현 한계 및 비교분석 연구 -창작물 AI≠A:I를 중심으로-
윤원재
조형미디어학
2024
.08
생성형 AI를 활용한 법률서비스의 쟁점과 과제
정채연
법학연구
2024
.08
생성형 AI 기반 주거공간의 바이오필릭 디자인 시각화 방안 - 직접적 경험을 위한 물 속성을 중심으로 -
김지연
,
박성준
대한건축학회논문집
2024
.07
생성형 AI 콘텐츠 수용 및 거부 의도에 영향을 미치는 요인 연구 : AI 커버 음악을 중심으로
최재서
,
민영
방송통신연구
2024
.07
최근 본 자료
댓글(0)
0