지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 저널정보
- Korean Institute of Information Scientists and Engineers Journal of KIISE Journal of KIISE Vol.46 No.4
- 발행연도
- 2019.4
- 수록면
- 369 - 375 (7page)
- DOI
- 10.5626/JOK.2019.46.4.369
이용수
초록· 키워드
오류제보하기
이미지 데이터가 폭발적으로 증가함에 따라 이미지를 자연어로 표현하기 위한 이미지 캡션 생성 기술에 대한 연구도 활발하게 이루어지고 있다. 기존 한국어 이미지 캡션 생성 기술에서는 영어권 데이터를 번역하여 사용함으로 인해 동시 발생 객체들에 의한 오류가 있다. 본 논문에서는 입력 이미지에 대한 캡션을 생성하여 추출한 명사와 이미지의 정답 캡션에서 추출한 명사를 이용하는 attention 함수를 새로운 손실 함수로 사용하는 이미지 캡션 모델을 제안한다. 공개된 실험 데이터를 사용한 실험에서 BLEU1 0.686, BLEU2 0.557, BLEU3 0.456, BLEU4 0.372를 보였다. 이를 이용하여 제안된 모델이 고빈도 동시 발생 객체 오류 해결에 효과적임을 입증하고 기존 연구보다 높은 성능을 얻음을 보이며 중복된 출력 문장을 줄임으로써 이미지 캡션의 다양한 표현들이 생성에 효과적임을 보였다. 또한 본 논문에서 제안하는 방법을 이용하여 이미지 캡션 모델을 학습하기 위한 코퍼스를 생성할 수 있다.
목차
요약
Abstract
1. 서론
2. 이전 연구
3. 제안 방법
4. 실험
5. 결론 및 고찰
References
참고문헌 (10)
참고문헌 신청
[Online]. Available: https://www.microsoft.com/en-us/seeing-ai/
Mao, Junhua, et al., "Deep captioning with multimodal recurrent neural networks (m-rnn)," arXiv preprint arXiv:1412.6632, 2014.
VINYALS, Oriol, et al., "Show and tell : Lessons learned from the 2015 mscoco image captioning challenge," IEEE transactions on pattern analysis and machine intelligence, pp. 652-663, 2017.
Jangseong Bae, Changki Lee, "Korean Image Caption Generation using Deep Learning," Proc. of the KIISE Korea Computer Congress 2016, pp. 488-490, Dec, 2016. (in Korean)
Hodosh, Micah, Peter Young, and Julia Hockenmaier, "Framing image description as a ranking task: Data, models and evaluation metrics," Journal of Artificial Intelligence Research, 47, pp. 853-899, 2013.
Jangseong Bae, Changki Lee, "Korean Image Caption Generation using Deep Learning," Proc. of the KIISE Korea Computer Congress 2016, pp. 488-490, Dec, 2016. (in Korean)
Hodosh, Micah, Peter Young, and Julia Hockenmaier, "Framing image description as a ranking task: Data, models and evaluation metrics," Journal of Artificial Intelligence Research, 47, pp. 853-899, 2013.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
한국어 데이터 셋을 이용한 이미지 캡션에 대한 연구
재활복지공학회논문지
2019 .11
-
Show, Attend and Tell 모델을 이용한 한국어 캡션 생성
한국방송미디어공학회 학술발표대회 논문집
2022 .11
-
딥러닝을 이용한 한국어 이미지 캡션 생성
한국정보과학회 학술발표논문집
2016 .12
-
객체 검출 기반 이미지 캡션 알고리즘 연구
Journal of Advanced Marine Engineering and Technology (JAMET)
2017 .09
-
한국어 및 영어 이미지 캡션이 가능한 범용적 모델 및 목적에 맞는 텍스트를 생성해주는 기법
한국정보통신학회논문지
2022 .08
-
Transformer를 이용한 이미지 캡션 생성
한국정보과학회 학술발표논문집
2019 .12
-
Image Caption Generation using Recurrent Neural Network
Journal of KIISE
2016 .08
-
전문성 이식을 통한 딥러닝 기반 전문 이미지 해석 방법론
지능정보연구
2020 .06
-
Adaptive Attention 기반 한국어 & 영어 이미지 캡션 생성 기술 개발
한국통신학회 학술대회논문집
2020 .02
-
Context-Gate를 이용한 이미지 캡션 생성
한국정보과학회 학술발표논문집
2018 .06
-
Sentence Generation from Knowledge Base Triples Using Attention Mechanism Encoder-decoder
Journal of KIISE
2019 .09
-
Boosting Image Caption Generation with Parts of Speech
Journal of KIISE
2021 .03
-
LSTM을 이용한 한국어 이미지 캡션 생성
한국어정보학회 학술대회
2017 .01
-
객체 행동 및 속성에 기반한 비디오 캡션 생성에 관한 연구
한국통신학회 인공지능 학술대회 논문집
2023 .09
-
Image Captioning using Multiple Transformers for Self-Attention Mechanism
한국정보과학회 학술발표논문집
2020 .12
-
지능형 감시 시스템을 위한 객체, 행동, 공간 정보를 통합한 이미지 캡셔닝 프레임워크
한국컴퓨터정보학회 학술발표논문집
2025 .01
-
Recurrent Neural Network를 이용한 이미지 캡션 생성
한국정보과학회 학술발표논문집
2015 .12
-
Caption Generation Model for Images using Convolutional Neural Networks
한국정보과학회 학술발표논문집
2018 .06
-
이미지 캡션 및 재귀호출을 통한 스토리 생성 방법
융합신호처리학회 논문지
2023 .03
-
Learning Semantic Features for Dense Video Captioning
Journal of KIISE
2019 .08
이 논문의 저자 정보
이 논문과 함께 이용한 논문
객체 검출 기반 이미지 캡션 알고리즘 연구
이준희
,
김종찬
,
서동환
Journal of Advanced Marine Engineering and Technology (JAMET)
2017
.09
Adaptive Attention 기반 한국어 & 영어 이미지 캡션 생성 기술 개발
조충상
,
이영한
,
고인수
외 1명
한국통신학회 학술대회논문집
2020
.02
여호사밧의 부흥 운동
손석태
개신논집
2008
.11
인공지능을 이용한 영화제작 : 시각효과를 중심으로
유태경
한국엔터테인먼트산업학회논문지
2021
.01
다중 레이블 콘볼루션 신경회로망을 이용한 능동펄스 식별 알고리즘 연구
김근환
,
이석진
,
이균경
외 1명
한국산업정보학회논문지
2020
.08
최근 본 자료
댓글(0)
0
UCI(KEPA) : I410-ECN-0101-2019-569-000571976