지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
이용수
초록· 키워드
오류제보하기
사람이 어떤 문장을 보고 그 문장에 대해 이해하는 것은 문장 안에서 주요한 단어를 이미지로 연상시켜 그 문장에 대해 이해한다. 이러한 연상과정을 컴퓨터가 할 수 있도록 하는 것을 text-to-image라고 한다. 기존 딥 러닝 기반 text-to-image 모델은 Convolutional Neural Network(CNN)-Long Short Term Memory(LSTM), bi-directional LSTM을 사용하여 텍스트의 특징을 추출하고, GAN에 입력으로 하여 이미지를 생성한다. 기존 text-to-image 모델은 텍스트 특징 추출에서 기본적인 임베딩을 사용하였으며, 여러 모듈을 사용하여 이미지를 생성하므로 학습 시간이 오래 걸린다. 따라서 본 연구에서는 자연어 처리 분야에서 성능 향상을 보인 어텐션 메커니즘(Attention Mechanism)을 문장 임베딩에 사용하여 특징을 추출하고, 추출된 특징을 GAN에 입력하여 이미지를 생성하는 방법을 제안한다. 실험 결과 기존 연구에서 사용되는 모델보다 inception score가 높았으며 육안으로 판단하였을 때 입력된 문장에서 특징을 잘 표현하는 이미지를 생성하였다. 또한, 긴 문장이 입력되었을 때에도 문장을 잘 표현하는 이미지를 생성하였다.
목차
등록된 정보가 없습니다.
참고문헌 (14)
참고문헌 신청
Reed, S. / 2016 / Generative adversarial text to image synthesis / International Conference on Machine Learning :1060~1069
Zhang, H. / 2017 / Stackgan : Text to photo-realistic image synthesis with stacked generative adversarial networks / Proceedings of the IEEE international conference on computer vision :5907~5915
Szegedy, C. / 2016 / Rethinking the inception architecture for computer vision / Proceedings of the IEEE conference on computer vision and pattern recognition :2818~2826
Xu, T. / 2018 / Attngan: Fine-grained text to image generation with attentional generative adversarial networks / Proceedings of the IEEE conference on computer vision and pattern recognition :1316~1324
Zhu, J. Y. / 2017 / Unpaired image-to-image translation using cycle-consistent adversarial networks / Proceedings of the IEEE international conference on computer vision :2223~2232
Zhang, H. / 2017 / Stackgan : Text to photo-realistic image synthesis with stacked generative adversarial networks / Proceedings of the IEEE international conference on computer vision :5907~5915
Szegedy, C. / 2016 / Rethinking the inception architecture for computer vision / Proceedings of the IEEE conference on computer vision and pattern recognition :2818~2826
Xu, T. / 2018 / Attngan: Fine-grained text to image generation with attentional generative adversarial networks / Proceedings of the IEEE conference on computer vision and pattern recognition :1316~1324
Zhu, J. Y. / 2017 / Unpaired image-to-image translation using cycle-consistent adversarial networks / Proceedings of the IEEE international conference on computer vision :2223~2232
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
ELMo 임베딩 기반 문장 중요도를 고려한 중심 문장 추출방법
스마트미디어저널
2021 .01
-
문장 기반 이미지 다양성 향상과 이미지 특성 활용을 통한 혼합형 이미지 생성 방법에 관한 연구
한국통신학회 인공지능 학술대회 논문집
2023 .09
-
LSTM 언어모델 기반 한국어 문장 생성
한국통신학회논문지
2016 .05
-
Neural Attention을 반영한 문장 생성 모델
한국컴퓨터정보학회 학술발표논문집
2017 .01
-
Automatic Extraction of Sentence Embedding Features for Question Similarity Analysis in Dialogues
Journal of KIISE
2019 .09
-
문장 및 단어 중요도를 통한 한국어 문서 연관 이미지 검색
한국산학기술학회 논문지
2019 .03
-
일관성 있는 이야기 삽화 생성을 위한 Text-to-image 생성 모델 활용 연구
방송공학회논문지
2024 .11
-
Development and Evaluation of Text-to-Scene Model for Korean Language Writing Education as a Foreign Language
한국컴퓨터게임학회논문지
2018 .01
-
텍스트 기반 이미지 생성 모델로 생성된 이미지의 신뢰성 분석 프레임워크
대한전자공학회 학술대회
2023 .06
-
연상작용과 샴 네트워크를 통한 문장 유사도 판별
대한산업공학회지
2020 .04
-
이미지 생성을 위해 노이즈를 이용한 GAN 시스템
한국정보통신학회논문지
2020 .06
-
LSTM을 이용한 한글 문장 생성 모델
한국정보과학회 학술발표논문집
2018 .12
-
이미지-텍스트 쌍을 활용한 이미지 분류 정확도 향상에 관한 연구
전기전자학회논문지
2023 .12
-
대형 이미지 데이터셋 구축을 위한 객체 엣지 기반 이미지 생성 기법
전기전자학회논문지
2023 .09
-
Single Sentence Summarization with an Event Word Attention Mechanism
Journal of KIISE
2020 .02
-
웹 말뭉치에 대한 문장 필터링 데이터 셋 구축 방법
한국정보통신학회논문지
2021 .11
-
Multi Cycle Consistent Adversarial Networks for Multi Attribute Image to Image Translation
한국컴퓨터정보학회논문지
2020 .09
-
Application of Improved Variational Recurrent Auto-Encoder for Korean Sentence Generation
Journal of KIISE
2018 .02
-
GAN 기반 이미지 생성 모델 분석
대한전기학회 학술대회 논문집
2020 .07
-
최신 Text-to-Image 생성 모델의 동향
정보과학회지
2022 .12
이 논문의 저자 정보
최근 본 자료
댓글(0)
0