인간의 선택과 판단을 설명하는 데 있어서 정서(emotion)가 차지하는 비중이 커지고 있다. 의사결정을 하는 과정에서 이성적이고 합리적인 숙의보다 정서가 보다 직접적인 영향을 미친다는 기제를 심리학에서는 ‘정서 휴리스틱(emotion heuristics)’이라고 부른다. 본 연구에서는 정서를 형성하는 다양한 단서(cue)들 중, 포털뉴스 사진 속 대통령의 이미지 정서에 주목하였다. 구체적으로, 뉴스사진 속 대통령의 표정을 통해 나타나는 정서가 뉴스 수용자에게 어떠한 개별정서를 유발하는지, 나아가 커뮤니케이션 행위에는 어떠한 영향을 미치는지 검증하였다. 이를 위해 크게 연구 1과 연구 2로 논문을 구성하였다. 먼저, 연구 1에서는 포털뉴스 메인에 노출되는 문재인 대통령 사진 속 이미지 정서를 분석하였다. 많은 양의 이미지 정서 데이터를 최대한 객관적으로 측정하기 위해, 정서 API의 알고리즘을 활용하였다. 알고리즘을 통해 측정할 수 있는 개별정서는 행복, 분노, 두려움, 놀람, 슬픔, 혐오, 경멸, 중립 등 여덟 가지이다. 동시에 본 연구자는 여덟 가지 개별정서의 측정 결과를 신뢰할 수 있는지에 대해 비판적으로 검증하는 단계가 필요하다고 판단하였다. 동일한 대통령 사진을 보더라도 알고리즘이 측정하는 개별정서와 인간이 인식하는 개별정서에 차이가 있을 수 있기 때문이다. 인간 코딩을 통한 알고리즘의 신뢰도 검증 결과, 여덟 가지 정서 중, 네 가지 정서(행복, 놀람, 슬픔, 중립)가 알고리즘의 측정과 인간의 인식 사이에 통계적으로 유의미한 차이가 없는 것으로 나타났다. 이와 같은 사전 신뢰도 검증 결과에 기반해, 이미지 정서와 이슈 유인가를 기준으로 실험처치물을 제작하였다. 실험연구인 연구 2에서는 뉴스 사진에서 나타나는 정서와 이슈 속성이 실제 뉴스 수용자에게 어떠한 영향을 미치는가를 분석하였다. 그 결과, 뉴스 사진에서 드러나는 대통령의 이미지 정서는 뉴스 수용자에게 특정한 개별정서를 유발하며, 유발된 정서는 수용자의 커뮤니케이션 행위(추가 정보추구, 의견표명의지)에 영향을 미치는 것으로 나타났다. 다시 말해, 대통령에 대해 행복·기쁨·긍지 등 긍정적 정서가 유발되는지, 분노·공포, 슬픔·수치·좌절 등 부정적 정서가 유발되는지에 따라 대통령에 대한 추가정보를 능동적으로 탐색하는 정도와 자신의 의견을 주위에 적극적으로 표명하는 정도에 영향을 미친다는 것이다. 요컨대, 본 연구에서는 대부분의 사람들이 뉴스를 접하는 공간인 포털 속 대통령의 이미지 정서를 알고리즘을 활용해 분석하였고, 그 이미지 정서가 뉴스 수용자의 개별정서 유발 및 커뮤니케이션 행위에 미치는 영향을 단계적으로 분석하였다. 알고리즘을 통해 기계적으로 이미지 정서를 수치화하였으며, 나아가 신뢰도 검증을 통해 보다 정교한 차원에서 알고리즘의 측정결과를 비판적으로 수용하였다는 점, 그리고 뉴스 속 사진을 통해 수용자들이 느끼는 정서가 갖는 저널리즘적 차원의 영향력을 논의하였다는 점에서 본 연구의 의의가 있다고 하겠다.
The role of emotion in the human decision-making process is becoming increasingly important. This study verified the influence of the president''s image emotion in portal(search engine) photos on individual emotions and communication behavior of news audiences. This paper is composed largely of Study 1 and Study 2. In the Study 1, this paper analyzed the emotions within president’s images exposed by portal news. To measure large amounts of image emotional data as objectively as possible, the algorithms of the Emotion API were used. There are eight individual emotions that can be measured through algorithms: happiness, anger, fear, surprise, sadness, disgust, contempt, and neutral. This paper decided that a critical step was needed to verify the reliability of the measurement results of the eight individual emotions. For example, if you look at the same picture of a president, there may be differences between the individual emotions that the algorithm scores and the individual emotions that human perceives. Verification of the reliability of algorithms through human-coding showed that among the eight emotions, four emotions(happiness, surprise, sadness, and neutral) were no statistical differences between the measurement of algorithms and the perception of humans. Based on these preliminary reliability verification results, this study produced experimental treatments based on image emotion and issue attributions. Experimental research Study 2 analyzed how the image emotion and issue attributions in news photos affected actual news audiences. As a result, it has been confirmed that the image of the president in the news photo has a significant effect on the audience’s communication(such as seeking additional information, expressing opinions). For example, active searching for additional information about the president or active expressing audiences’ opinions is affected by whether positive emotions such as happiness, joy, and pride, or whether negative emotions such as anger, fear, sadness, shame, are generated about the president. In conclusion, this study analyzed the president’s image emotions in the portal(search engines), which is the space where most people are exposed to news, through algorithms. And this study verified the effects of the image emotions on individual emotions and communication of news audiences. The significance of this study is that it mechanically scored image emotions. Furthermore, it critically accepted the measurement results of algorithms at a more sophisticated level through reliability verification. And this study attempted to discuss the journalistic level of emotions felt by the audiences through photographs in the news.
Ⅰ. 서론 1제1장. 문제제기 1제2장. 논문구성 3Ⅱ. 이론적 논의 6제1장. 정치뉴스와 정치인 이미지 6제1절. 정치인의 비언어적 커뮤니케이션 수단 6제2절. 언론의 뉴스사진 게이트키핑 9제3절. 포털 알고리즘: 또 하나의 게이트키퍼 14제4절. 뉴스사진이 수용자에게 미치는 영향 18제5절. 뉴스사진 속 정서 인식 21제6절. 뉴스사진 속 정서의 영향 23제2장. 정서 효과에 대한 논의 25제1절. 커뮤니케이션과 정서 25제2절. 정서의 기본효과 28제3절. 정서의 확장효과 30제3장. 인지평가에 따른 개별정서 효과 34제4장. 개별정서가 커뮤니케이션 행위에 미치는 영향 39Ⅲ. 연구문제 43제1장. 연구 1 43제2장. 연구 2 45Ⅳ. 연구방법 48제1장. 연구 1 48제1절. R프로그램을 활용한 포털 뉴스 이미지 크롤링 48제2절. Microsoft Emotion API를 활용한 이미지 정서분석 49제3절. 알고리즘이 갖는 한계 보완 50제4절. 사전조사를 통해 신뢰할 수 있는 개별정서 선정 53제5절. 인간코딩을 통한 이슈 속성 내용분석 54제2장. 연구 2 59제1절. 실험 설계 및 절차 59제2절. 실험 처치물 제작 60제3절. 주요 변인 측정문항 62제3장. 최종 연구절차 69Ⅴ. 연구결과 68제1장. 인간코딩을 통한 정서 알고리즘의 신뢰도 검증 68제2장. 연구 1 83제1절. 웹크롤링을 통한 뉴스 이미지 수집 결과 83제2절. 이미지 정서 자동화분석 결과 86제3절. 이미지 정서 내용분석 결과 87제3장. 연구 2 108제1절. 주요 변인의 요인분석 및 신뢰성 검증 108제2절. 실험참여자 인구통계학적 특성 116제3절. 개별정서 유발에 미치는 영향 분석결과 118제4절. 추가정보추구에 미치는 영향 분석결과 125제5절. 의견표명의지에 미치는 영향 분석결과 130Ⅵ. 결론 136제1장. 연구결과의 요약 136제2장. 결론 및 논의 142제3장. 연구의 함의 147제4장. 연구의 한계점 및 후속 연구를 위한 제언 149참고문헌 151부록 1: 설문지 163부록 2: 분석결과표 190