딥 러닝(Deep learning)기반 동영상 처리 알고리즘을 통한 19대 대선 TV토론 영상분석 : 후보자들의 등장빈도, 표정, 응시방향에 대한 분석

최윤정; 정유진; 윤호영; 김민정; 김나영; 첸루; 신주연; 이주희; 김나영; 여은; 강제원

doi:10.20879/kjjcs.2020.64.5.009

추천

검색

질문

자료유형: 학술저널

저자정보: 최윤정 (이화여자대학교) 정유진 (이화여자대학교) 윤호영 (이화여자대학교) 김민정 (이화여자대학교) 김나영 (이화여자대학교) 첸루 (이화여자대학교) 신주연 (이화여자대학교) 이주희 (이화여자대학교) 김나영 (이화여자대학교) 여은 (이화여자대학교) 강제원 (이화여자대학교)

저널정보: 한국언론학회 한국언론학보 韓國言論學報 제64권 제5호

발행연도: 2020.10

수록면: 319 - 372 (54page)

DOI: 10.20879/kjjcs.2020.64.5.009

이용수

📌

연구주제

📖

연구배경

🔬

연구방법

🏆

연구결과

초록· 키워드

오류제보하기

본 연구는 인공지능 딥 러닝 기술을 적용한 알고리즘을 구축해, 2017년 19대 대선 기간에 진행된 TV토론 자료 중 정치인들의 표정 및 응시방향을 분석했다. TV토론에서 후보들이 보여준 비언어적 메시지, 구체적으로 표정(분노, 짜증, 만족, 무표정)과 응시방향을 분석하기 위해 딥 러닝 기술을 이용해 분류 네트워크 알고리즘을 구축하고 6차례의 토론 데이터를 분석했다. 또한 영상분석결과를 패널 설문조사 데이터와 통합하여 TV토론에서 후보들이 보여준 표정의 비율에 따라 후보에 대한 호감도 평가가 어떻게 달라지는지 다층모형 분석을 실시했다. 연구 결과, 문재인 후보가 만족스러운 표정을 가장 많이 지었고 유승민 후보는 무표정한 얼굴로 감정을 잘 드러내지 않았다. 다층모형 분석결과, 긍정적 이미지인 만족스러운 표정은 후보의 호감도를 더 긍정적으로 평가하도록 유의한 영향을 미쳤는데, 변화의 폭은 투표를 하지 않은 그룹보다 투표를 한 그룹에서 더 크게 나타났다. 지상파, 종합편성채널, 온라인 미디어 등 주로 사용하는 미디어로 집단을 구분한 분석에서는 분노한 표정에 따라 호감도 변화가 유의하게 달랐다. 분노한 표정에 노출된 경우 후보에 대한 호감도가 유의하게 변화하는데 종편을 주로 사용하는 그룹은 지상파 주 이용 그룹보다 후보를 긍정적으로 평가하는 것으로 나타났다. 본 연구는 TV토론에서 정치인의 비언어적 메시지가 유권자에게 미치는 영향을 밝혔고, 이후 정치인들의 표정과 응시방향을 자동적으로 분류할 수 있는 알고리즘을 개발했다는 점에서 의미가 있다.

This study analyzed the frequency of appearance and nonverbal messages of political candidates in the television debates for the 19th presidential election held in 2017. To analyze nonverbal messages, facial expressions (angry, irritated, satisfied, and neutral) and the direction of gaze in the six televison debates, a classification network was constructed using deep learning technology. For this analysis, videos of six television debates held for 120 minutes per episode were collected, and image data was extracted at the rate of 30 frames per second as a frame, which resulted in image data of approximately 1.25 million frames. After that, this study built an image-analyzing system through deep learning, which automatically recognizes and classifies candidates appearing in videos, and then analyzes video frames by their facial expressions and direction of gaze. Then, the system counts how often each candidate appeared during all television debates in seconds, and analyzes the proportion of facial expressions of the candidates during the entire television debates. The results showed that Sang-Jung Shim appeared the most over three debates, followed by Chul-soo Ahn in two debates and Jae-in Moon in one. The least appeared candidate was Jun-pyo Hong. As for the facial expression, Moon showed the most satisfactory facial expressions, and Seung-min Yoo expressed his emotion the least. Hong showed the irritated expression the most, indicating that he had difficulty managing his facial expression. Additionally, this study conducted a multi-level analysis combining the image data with a panel survey, which measured respondents" preference of candidates before and after the presidential campaign, and the number of times they watched the debates. The multi-level analysis confirmed that the preferences of the candidates changed depending on the exposure to the facial expressions made by the candidates in the actual televison debates. As for the satisfactory expression and the expressionless face, the candidates were evaluated more positively as the expression exposure increased. In the case of the angry expression, the degree of candidate favorability decreased after the exposure. These results suggest that the viewers’ evaluations of the candidates changed substantially according to the candidates" facial expressions in the debate. In an era where communication scholars are expanding their research areas by converging with new disciplines such as media engineering and data science, this study suggests a new research direction. We hope that this study lays the groundwork for the research on media analysis using algorithms and deep learning.

#Presidential TV debate #Artificial intelligence video analysis #Mixed model analysis #Facial expression classification algorithm #Politicians direction of gaze #대선 TV토론 #인공지능 영상분석 #다층모형분석 #표정분류 알고리즘 #정치인의 응시방향

참고문헌 (0)

참고문헌 신청

참고문헌이 DBpia에서 서비스 중이라면, [참고문헌 신청]을 통해 등록해보세요

함께 읽어보면 좋을 논문

논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!

이 논문의 저자 정보

최윤정

소속기관 이화여자대학교

주요연구분야 사회과학 > 신문방송학 TOP 0.5% 자연과학 > 생활과학

논문수 74 이용수 72,674

정유진

소속기관 단국대학교

주요연구분야 사회과학 > 신문방송학 TOP 10% 공학 > 컴퓨터학

논문수 10 이용수 8,684

윤호영

소속기관 이화여자대학교

주요연구분야 사회과학 > 신문방송학 TOP 5% 사회과학 > 정치외교학

논문수 34 이용수 20,761

김민정

소속기관 이화여자대학교

주요연구분야 사회과학 > 신문방송학

논문수 1 이용수 956

김나영

소속기관 이화여자대학교

주요연구분야 사회과학 > 신문방송학

논문수 2 이용수 1,912

첸루

소속기관 이화여자대학교

주요연구분야 사회과학 > 신문방송학

논문수 2 이용수 1,276

신주연

소속기관 이화여자대학교

주요연구분야 사회과학 > 신문방송학 공학 > 전기전자공학 > 정보통신공학

논문수 4 이용수 1,333

이주희

소속기관 이화여자대학교

주요연구분야 사회과학 > 신문방송학 공학 > 전기전자공학 > 정보통신공학

논문수 5 이용수 1,015

김나영

소속기관 이화여자대학교

주요연구분야 사회과학 > 신문방송학

논문수 2 이용수 1,912

여은

소속기관 MBC

주요연구분야 사회과학 > 신문방송학 공학 > 전기전자공학 > 정보통신공학

논문수 5 이용수 1,326

강제원

소속기관 이화여자대학교

주요연구분야 공학 > 전기전자공학 > 전자공학 TOP 10% 공학 > 전기전자공학 > 정보통신공학

논문수 53 이용수 3,287

이 논문과 함께 이용한 논문

환경분쟁조정의 실효성에 관한 연구 : 소음 관련 재정결정 불복사건을 중심으로

대한민국은 지난 20년간 ‘북한’과 ‘통일’을 어떻게 보았는가? 언론 보도 빅데이터 분석 및 국민 인식 종단연구

박종민 , 정영주 , 주호준 외 1명 한국언론학보 2020 .12

2016년 미국 대선 TV토론에서 나타난 후보자의 메시지와 얼굴표정의 특징 분석

박지혜 , 김재홍 , 김대중 지역과 커뮤니케이션 2019 .11

최근 본 자료

전체보기

UCI(KEPA) : I410-ECN-0101-2020-070-001583233

구분	그룹	데이터 항목
AI 학습용 데이터	원문	원문 PDF 파일
AI 학습용 데이터	원문 + 메타 (기본/상세)	원문 PDF 파일 및 서지정보 CSV
대량 구매용 데이터	B2B 구독 방식	특정 자료 한정으로 원문 접근 권한 부여
대량 구매용 데이터	URL 전달 방식	바로 PDF 뷰어를 열람할 수 있는 URL 제공

구분	그룹	데이터 항목
AI 학습용 데이터	기본 메타	발행기관명, 간행물명, 권호명, 권(vol), 호(issue), 통권, 발행연도, 발행월, 논문명, 저자명, 시작페이지, 종료페이지, 전체페이지, 상세페이지URL
상세 메타 데이터	발행기관 메타	발행기관 이명, 영문명, 창립연도, 홈페이지URL, 발행기관 소개
	간행물 메타	부제목, 간행물 유형, ISSN, ISBN, 최초발행연도, 폐간연도, 간행빈도, 발행주기, 등재사항, 이용수, 피인용수, 권호수, 논문수, 표지이미지
	논문 메타	작성 언어, 부제목, 대등제목, 목차, 키워드, 초록, 이미지, 참고문헌, 이용수, 피인용수, 논문활용도, DBpia통합주제분류, KDC분류, DDC분류, 한국연구재단분류, UCI, DOI
	저자 메타	소속기관, 소속부서, 직급, 연구분야, 연구키워드, 이용수, 피인용수, 저자 논문활용도

구분	그룹	데이터 항목
※ 결합형/맞춤형 메타 데이터는 신청 내용에 따라 다양하게 제공 가능
이용순위 정보	주제분야별 많이 이용된 논문	“인문학”에서 많이 이용된 논문 TOP100
	이용기관별 많이 이용된 논문	“중고등학교”에서 많이 이용된 논문 TOP100
	세부기관별 많이 이용된 논문	“서울대학교”에서 많이 이용된 논문 TOP100
	키워드별 많이 이용된 논문	“Chat GPT”에서 많이 이용된 논문 TOP100
키워드 정보	많이 이용된 키워드	특정기간/분야/저널 내 많이 이용된 키워드
	많이 발행된 키워드	특정기간/분야/저널 내 많이 발행된 키워드
	많이 검색된 키워드	특정기간/분야/저널 내 많이 검색된 키워드
	연구 트렌드 키워드	특정 키워드 연관 연구동향 분석 데이터 키워드

논문 기본 정보

초록· 키워드

AI 요약

연구주제

연구배경

연구방법

연구결과

주요내용

목차

참고문헌 (0)

함께 읽어보면 좋을 논문

이 논문의 저자 정보

이 논문과 함께 이용한 논문

최근 본 자료

댓글(0)