본 논문에서는 관객의 신체 제스처 인식을 기반으로 시각적, 언어적 활자표현이 가능한 인터랙티브 타이포그래피에 대하여 연구하였다. 본 논문을 위해 구현한 작품은 참여자 제스처에 따라 작품이 완성되는 실시간 인터랙티브 타이포그래피 작업으로 평소 인간이 글자를 입력하기 위해 사용하는 키보드나 모바일 기기를 벗어나 관객의 신체 포즈가 인터페이스가 되는 방식을 적용하고 있다. 시스템 구현을 위한 방법론적 연구로써는 실시간 데이터 처리 과정을 거쳐 관객의 신체 제스처를 문자로 인식하는 알고리즘을 연구하고, 이를 통해 시각이미지를 표현하였다. 이러한 과정을 통하여 신체 제스처를 데이터화하고 시각 매체와의 상호작용을 위한 수단으로 사용하는 방법을 제시하고자 한다.
This study researched the interactive typography of possible visual and linguistic typography expression based on the recognition of physical gesture of visitors. he artwork implemented for this study is the real-time interactive typography work that gets completed according to the gesture of viewers and is using a method of the physical pose of visitors becoming an interface instead of keyboard or mobile device that people usually use to enter letters. As a methodological research for the system implementation, this study researched an algorithm of recognizing physical gesture of viewers as letters through real-time data processing, and expressed visual image through this process. This study intends to create physical gestures into data and to suggest ways of using them as a method for interaction with the visual media.