지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 발행연도
- 2023.4
- 수록면
- 39 - 47 (9page)
- DOI
- 10.5573/ieie.2023.60.4.39
이용수
초록· 키워드
오류제보하기
최근 딥러닝 기반 객체추적 기술이 발전함에 따라 스포츠 경기 분석, 영상 보안, 증강현실 등 다양한 응용 분야에서 객체추적 기술이 사용되고 있다. 사용자들은 높은 객체추적 정확도뿐만 아니라 빠른 객체추적 속도에 따른 높은 QoS를 요구한다. 본 연구에서는 현재 객체추적 솔루션 중 최고로 꼽히는 트랜스포머기반 CSWinTT 모델의 객체추적 속도를 향상시킨다. 이 모델의 인코더 레이어 내 Multi-Head Attention(MHA)의 head연산들은 전체 트랜스포머 추론 과정에서 가장 많은 실행시간을 차지하고, 각 head들은 각각 다른 입력 값을 가지지만 직렬로 실행된다. 이를 개선하기 위하여 본 연구에서는 각각의 head연산들을 병렬적으로 실행시킨다. 병렬 실행을 위하여 하나의 모듈로 이루어진 MHA연산을 head 개수만큼 서브 모듈로 분리하고, 분리된 각각의 모듈을 멀티쓰레드 환경에서 실행한다. 이때 순수 Python 환경에서는 불가능한 멀티쓰레드 환경을 C++ 실행 환경으로 개선하여 가능하게 한다. 또한 각 쓰레드들이 비동기적으로 전달하는 커널들을 GPU 내부에서 최대한 동시에 실행될 수 있도록 한다. 다양한 실험을 통해 MHA 병렬실행의 효과를 확인한 결과, 추론정확도는 거의 동일하게 유지하면서 기존 실행환경에 비하여 인코더의 평균 실행시간은 56.8% 감소하였고, 평균 FPS는 63.3% 증가하였다.
목차
요약
Abstract
Ⅰ. 서론
Ⅱ. 연구배경 및 문제 정의
Ⅲ. 병렬 MHA 연산 기반 트랜스포머 인코더
Ⅳ. 실험
Ⅴ. 결론
REFERENCES
참고문헌 (16)
참고문헌 신청
A. Dosovitskiy, L. Beyer, A. Kolesnikov, D. Weissenborn, X. Zhai, T. Unterthiner, M. Dehghani, M. Minderer, G. Heigold, S. Gelly, J. Uszkoreit & N. Houlsby, "An Image is Worth 16x16 Words: Transformers for Image Recognition at Scale" arXiv:2010.11929, 201
P. M. Nadkarni, L. O. Machado & W. W. Chapman, "Natural Language Processing: an Introduction" Journal of the American Medical Informatics Association, Vol. 18, no. 5, pp. 544-551, September 2011.
A. Vaswani, N. Shazeer, N. Parmar, J. Uszkoreit, L. Jones, A. N. Gomez, L. Kaiser & I. Polosukhin, "Attention is All You Need" Advances in Neural Information Processing Systems, Vol. 30, December 2017.
Z. Song, J. Yu, Y. P. P. Chen & W. Yang, "Transformer Tracking With Cyclic Shifiting Window Attention" Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition(CVPR), pp. 8791-8800, Vancouver, Canada, November 2022.
M. Kristan, A. Leonardis, J. Matas, M. Felsberg, R. Pflugfelder, J. K. Kamarainen, M. Danelljan, L. C. Zajc, A. Lukezic, O. Drbohlav, et al., "The eighth visual object tracking VOT2020 challenge results" European Conference on Computer Vision, pp. 547-601
P. M. Nadkarni, L. O. Machado & W. W. Chapman, "Natural Language Processing: an Introduction" Journal of the American Medical Informatics Association, Vol. 18, no. 5, pp. 544-551, September 2011.
A. Vaswani, N. Shazeer, N. Parmar, J. Uszkoreit, L. Jones, A. N. Gomez, L. Kaiser & I. Polosukhin, "Attention is All You Need" Advances in Neural Information Processing Systems, Vol. 30, December 2017.
Z. Song, J. Yu, Y. P. P. Chen & W. Yang, "Transformer Tracking With Cyclic Shifiting Window Attention" Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition(CVPR), pp. 8791-8800, Vancouver, Canada, November 2022.
M. Kristan, A. Leonardis, J. Matas, M. Felsberg, R. Pflugfelder, J. K. Kamarainen, M. Danelljan, L. C. Zajc, A. Lukezic, O. Drbohlav, et al., "The eighth visual object tracking VOT2020 challenge results" European Conference on Computer Vision, pp. 547-601
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
멀티뷰 영상에서 객체 분할 및 추적
한국정보통신학회논문지
2025 .03
-
CPU 환경에서의 실시간 동작을 위한 딥러닝 기반 다중 객체 추적 시스템
방송공학회논문지
2020 .03
-
실시간 응용을 위한 혼합형 다중 객체 추적 시스템의 구현
한국정보기술학회논문지
2019 .11
-
360도 영상 공간에서의 다중 객체 추적 방법
대한전자공학회 학술대회
2019 .06
-
배경 모델 학습을 통한 객체 분할/검출 및 파티클 필터를 이용한 분할된 객체의 움직임 추적 방법
한국정보통신학회논문지
2016 .08
-
딥러닝 기술을 이용한 3차원 객체 추적 기술 리뷰
융합신호처리학회 논문지
2021 .01
-
다중 실시간 카메라에서 배경 제거를 이용한 객체 추적 고도화
Proceedings of KIIT Conference
2023 .06
-
화재 현장에서의 RGB-T 카메라 기반 객체 인식 및 추적
대한기계학회 논문집 A권
2025 .04
-
Relation Tracking of Occluded objects using a Perspective Depth
디지털콘텐츠학회논문지
2015 .12
-
다수 객체 모델을 이용한 객체 추적 기법
한국방송미디어공학회 학술발표대회 논문집
2015 .11
-
지능형 영상 교통 감시 시스템에서 공간 투영기법을 이용한 이동물체 추적 방법
한국지능시스템학회 논문지
2015 .02
-
다중 객체 비디오에서의 어텐션 기반 단일 객체 추적 모델 연구
한국정보과학회 학술발표논문집
2022 .12
-
실시간 임베디드 환경에서의 다중객체추적 기법 동향
정보과학회지
2022 .07
-
이미지 생성 네트워크를 사용한 객체 추적 정확도 향상
한국통신학회 학술대회논문집
2022 .02
-
객체 크기에 따른 실시간 다중 객체 추적 방법 성능 평가에 대한 연구
대한전자공학회 학술대회
2020 .08
-
트랜스포머 기반 객체 검출
정보 및 제어 논문집
2021 .10
-
가려진 보행자 추적에 강건한 다중 객체 추적 기술
한국자동차공학회 춘계학술대회
2021 .06
-
객체 검출 인식률 향상을 위한 다중 객체 추적 기반 강건한 트랙 관리 기법
전자공학회논문지
2023 .12
-
차분 영상을 이용한 객체 추적 방법
한국정보통신학회 종합학술대회 논문집
2021 .05
-
Redesigning Multi-head Attention and Mixing Heads to Save Memory and Computation
전자공학회논문지
2024 .12
이 논문의 저자 정보
이 논문과 함께 이용한 논문
최근 본 자료
댓글(0)
0
UCI(KEPA) : I410-ECN-0101-2023-569-001465476