지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 저널정보
- 한국지능시스템학회 INTERNATIONAL JOURNAL of FUZZY LOGIC and INTELLIGENT SYSTEMS INTERNATIONAL JOURNAL of FUZZY LOGIC and INTELLIGENT SYSTEMS Vol.19 No.1
- 발행연도
- 2019.3
- 수록면
- 1 - 9 (9page)
- DOI
- 10.5391/IJFIS.2019.19.1.1
이용수
초록· 키워드
오류제보하기
In recent studies, speech recognition performance is greatly improved by using HMM and CNN. HMM is studying statistical modeling of voice to construct an acoustic model and to reduce the error rate by predicting voice through image of mouth region using CNN. In this paper, we propose visual speech recognition (VSR) using lip images. To implement VSR, we repeatedly recorded three subjects speaking 53 words chosen from an emergency medical service vocabulary book. To extract images of consonants, vowels, and final consonants in the recorded video, audio signals were used. The Viola–Jones algorithm was used for lip tracking on the extracted images. The lip tracking images were grouped and then classified using CNNs. To classify the components of a syllable including consonants, vowels, and final consonants, the structure of the CNN used VGG-s and modified LeNet-5, which has more layers. All syllable components were classified, and then the word was found by the Euclidean distance. From this experiment, a classification rate of 72.327% using 318 total testing words was obtained when VGG-s was used. When LeNet-5 applied this classifier for words, however, the classification rate was 22.327%.
목차
Abstract
1. Introduction
2. Related Work
3. Experimental Method
4. VSR Method
5. Experiment Result
6. Conclusion
References
참고문헌 (19)
참고문헌 신청
유제훈 / 2016 / Cascade 안면 검출기와 컨볼루셔널 신경망을 이용한 얼굴 분류 / 한국지능시스템학회 논문지 26(1):70~75
유제훈 / 2016 / 컨볼루셔널 신경망과 케스케이드 안면 특징점 검출기를 이용한 얼굴의 특징점 분류 / 제어.로봇.시스템학회 논문지 22(3):241~246
Jinyu Li / 2014 / An Overview of Noise-Robust Automatic Speech Recognition / IEEE/ACM Transactions on Audio, Speech, and Language Processing 22(4):745~777
Ziheng Zhou / 2014 / A review of recent advances in visual speech decoding / Image and Vision Computing 32(9):590~605
Kuniaki Noda / 2015 / Audio-visual speech recognition using deep learning / Applied Intelligence 42(4):722~737
유제훈 / 2016 / 컨볼루셔널 신경망과 케스케이드 안면 특징점 검출기를 이용한 얼굴의 특징점 분류 / 제어.로봇.시스템학회 논문지 22(3):241~246
Jinyu Li / 2014 / An Overview of Noise-Robust Automatic Speech Recognition / IEEE/ACM Transactions on Audio, Speech, and Language Processing 22(4):745~777
Ziheng Zhou / 2014 / A review of recent advances in visual speech decoding / Image and Vision Computing 32(9):590~605
Kuniaki Noda / 2015 / Audio-visual speech recognition using deep learning / Applied Intelligence 42(4):722~737
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
An Improved LeNet-5 Convolutional Neural Network for Intelligent Recognition of License Plate Images
IEIE Transactions on Smart Processing & Computing
2023 .10
-
베이지안 분류 기반의 입 모양을 이용한 한글 모음 인식 시스템
멀티미디어학회논문지
2019 .08
-
Recognition of Virtual Written Characters Based on Convolutional Neural Network
JOURNAL OF PLATFORM TECHNOLOGY
2018 .03
-
음성명령기반 26관절 보행로봇 실시간 작업동작제어에 관한 연구
제어로봇시스템학회 논문지
2016 .04
-
Depth Image 와 Speech Recognition 을 통한 뇌졸중 조기 진단 시스템
한국정보과학회 학술발표논문집
2018 .06
-
Youtube와 Emotion API를 이용한 음성 기반 감정 인식 AI 시스템
대한전자공학회 학술대회
2018 .06
-
가우스 분류기를 이용한 입술영역 추출
멀티미디어학회논문지
2017 .01
-
음성 인식 인식률 향상을 위한 단어 평가에 관한 연구
한국통신학회 학술대회논문집
2020 .08
-
한글 단어 및 문장의 음성 인식률 향상을 위한 음성 인식 API 개발
한국정보기술학회논문지
2019 .11
-
음성 강도를 이용한 감정 분류 연구
한국생산제조학회 학술발표대회 논문집
2021 .12
-
Speech Recognition using Machine Learning
IEIE Transactions on Smart Processing & Computing
2021 .06
-
성인과 초등 저학년의 음성인식기 호출명령어 인식률 차이에 대한 고찰
한국정보통신학회 종합학술대회 논문집
2019 .10
-
3D CNN과 영상처리 기술을 융합한 한국어 독순술 시스템 개발
멀티미디어학회논문지
2024 .11
-
Convolutional Neural Network Based Image Processing System
Journal of information and communication convergence engineering
2018 .09
-
Machine Learning based Pattern Recognition and Classification Framework Development
제어로봇시스템학회 국제학술대회 논문집
2017 .10
-
음성신호기반의 감정인식의 특징 벡터 비교
전기학회논문지
2018 .10
-
음성인식기 호출명령어별 두 비교군의 인식률에 미치는 영향 연구
한국정보통신학회 종합학술대회 논문집
2020 .07
-
Convolutional Neural Network를 이용한 음성 인식 애플리케이션
한국정보과학회 학술발표논문집
2019 .06
-
Human Motion Recognition Based on Spatio-temporal Convolutional Neural Network
멀티미디어학회논문지
2020 .08
-
STFT를 사용한 음성 신호 기반의 감정 분류 연구
한국생산제조학회지
2021 .10
이 논문의 저자 정보
이 논문과 함께 이용한 논문
최근 본 자료
댓글(0)
0
UCI(KEPA) : I410-ECN-0101-2019-003-000551537