개인구독
소속 기관이 없으신 경우, 개인 정기구독을 하시면 저렴하게
논문을 무제한 열람 이용할 수 있어요.
지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 발행연도
- 2019.4
- 수록면
- 142 - 147 (6page)
- DOI
- 10.5391/JKIIS.2019.29.2.142
이용수
초록· 키워드
오류제보하기
최근 순환신경망(Recurrent Neural Network, RNN)이 언어 모델링에서 두각을 나타냄에 따라 많은 연구들에서 해당 기법을 사용하여 언어 모델링 연구를 수행하고 있다. RNN은 뉴스와 같은 정형화된 텍스트의 생성뿐만 아니라 소설, 수필과 같은 창의적 텍스트 생성을 위한 시스템에도 쓰이고 있다. 영어권에서는 글쓰기를 위한 보조적 수단으로 사용된 연구가 있으나, 한국어에 관한 연구는 아직 부족하다. 한국어는 영어보다 어휘의 쓰임새나 형변환이 다양하기 때문에 난이도가 높다. 본 논문에서는 도메인 정보가 강화된 워드 임베딩을 이용하여 한국어 텍스트 생성 모델을 구축하였다. 임베딩 층을 학습하기 위해 두 가지 모델을 실험 하였는데 도메인 말뭉치만 가지고 임베딩 층을 학습하는 모델 1과 대용량의 일반 데이터를 먼저 학습하고 도메인 말뭉치를 추가 학습하는 모델 2를 구축하여 실험을 수행하였다. 실험 결과, 두 모델 모두 한국어 창의적 텍스트 생성의 가능성을 보여 주었는데 모델 2를 통해 생성된 데이터는 창의성 면에서, 즉 수사적 단어의 활용 면에서 모델 1보다 나았고 통사적 면에서는 모델 1이 좀 더 깔끔한 문장을 생성하였다.
목차
요약
Abstract
1. 서론
2. 기존연구
3. 실험
4. 결론
References
참고문헌 (13)
참고문헌 신청
Melissa Roemmele, Andrew Gordon and Reid Swanson, “Evaluating story generation systems using automated linguistic analyses,” SIGKDD 2017 Workshop on Machine Learning for Creativity, pp. 13-17, Aug. 2017.
Brian Roark, Murat Saraclar and Michael Collins, “Discriminative n-gram language modeling,” Computer Speech & Language, vol. 21, no. 2, pp.373-392, 2007.
Taro Watanabe, Hajime Tsukada and Hideki Isozaki, “A succinct n-gram language model,” Proceedings of the ACL-IJCNLP 2009 Conference Short Papers, pp. 341-344, Aug, 2009.
Yoshua Bengio, Rejean Ducharme, Pascal Vincent and Christian Jauvin, “A neural probabilistic language model,” Journal of Machine Learning Research 3, pp.1137-1155, 2003.
Ronan Collobert, Jason Weston, Leon Bottou, Michael Karlen, Koray Kavukcuoglu and Pavel Kuksa, “Natural language processing (almost) from scratch,” Journal of Machine Learning Research 12, pp.2493-2537, 2011.
Brian Roark, Murat Saraclar and Michael Collins, “Discriminative n-gram language modeling,” Computer Speech & Language, vol. 21, no. 2, pp.373-392, 2007.
Taro Watanabe, Hajime Tsukada and Hideki Isozaki, “A succinct n-gram language model,” Proceedings of the ACL-IJCNLP 2009 Conference Short Papers, pp. 341-344, Aug, 2009.
Yoshua Bengio, Rejean Ducharme, Pascal Vincent and Christian Jauvin, “A neural probabilistic language model,” Journal of Machine Learning Research 3, pp.1137-1155, 2003.
Ronan Collobert, Jason Weston, Leon Bottou, Michael Karlen, Koray Kavukcuoglu and Pavel Kuksa, “Natural language processing (almost) from scratch,” Journal of Machine Learning Research 12, pp.2493-2537, 2011.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
LSTM 언어모델 기반 한국어 문장 생성
한국통신학회논문지
2016 .05
-
사전 학습 언어모델 기반 오픈 도메인에서의 한국어 대화 생성
한국정보과학회 학술발표논문집
2022 .06
-
Analyzing the Impact of Sequential Context Learning on the Transformer Based Korean Text Summarization Model
Journal of KIISE
2021 .10
-
기억재현 지속학습을 활용한 다중 도메인 응답 생성
정보과학회 컴퓨팅의 실제 논문지
2022 .03
-
한국어 텍스트 임베딩 모델의 개선을 위한 예비 연구
한국통신학회 학술대회논문집
2021 .02
-
Paragraph Vector 기반 RNN 모델을 이용한 일관된 주제의 텍스트 생성
한국정보과학회 학술발표논문집
2016 .12
-
RNN 기반 시계열 데이터 보간 모델 학습을 위한 최적의 학습 데이터 생성 기법 연구
한국정보과학회 학술발표논문집
2022 .12
-
심층 신경망 기반 자연어처리 모델의 성능 비교
한국통신학회논문지
2019 .07
-
Plug-and-Play Language Model을 활용한 한국어 언어모델 독성 제어
정보과학회 컴퓨팅의 실제 논문지
2024 .06
-
RNN 을 이용한 소스코드 언어 변환 모델
한국정보과학회 학술발표논문집
2017 .06
-
도메인 특수성이 도메인 특화 사전학습 언어모델의 성능에 미치는 영향
지능정보연구
2022 .12
-
Robust Korean Table Machine Reading Comprehension across Various Domains
Journal of KIISE
2023 .12
-
텍스트 기반 이미지 생성 모델을 활용한 이야기의 장르를 반영한 일관된 이미지 생성 연구
한국방송미디어공학회 학술발표대회 논문집
2024 .06
-
3D 생성 모델과 2D 생성 모델의 Text-to-3D 생성에 관한 Trade-Off 분석
대한전자공학회 학술대회
2024 .06
-
LSTM 언어모델을 이용한 한국어 자연어 생성 모델
한국정보과학회 학술발표논문집
2017 .12
-
Self-Supervised Document Representation Method
한국컴퓨터정보학회논문지
2020 .05
-
Combinations of Text Preprocessing and Word Embedding Suitable for Neural Network Models for Document Classification
Journal of KIISE
2018 .07
-
Data-to-Text 생성을 위한 한국어 데이터셋 구축
한국정보과학회 학술발표논문집
2020 .07
-
도메인 특화 사전학습 언어모델 개발 전략: 자동차 분야 언어모델 V-BERT 개발 사례
정보과학회 컴퓨팅의 실제 논문지
2023 .05
-
New Transformer Model to Generate Molecules for Drug Discovery
Journal of KIISE
2023 .11
이 논문의 저자 정보
이 논문과 함께 이용한 논문
내용분석방법을 통한 소비자행복 분석 - 소확행 트렌드를 중심으로 -
이제성
,
이준영
문화와융합
2019
.06
딥러닝을 활용한 예술로봇의 관객 감정 파악과 공감적 표정 생성
노진아
한국콘텐츠학회 종합학술대회 논문집
2019
.05
빅데이터 분석을 통한 디저트 카페 개념에 대한 탐색적 연구
김예지
,
김학선
Culinary Science & Hospitality Research
2019
.05
공유숙박 서비스 기업의 감성분석을 통한 이미지 변화
박흥식
,
김주일
Culinary Science & Hospitality Research
2019
.05
BERT 기반 특징추출기를 이용한 감성 분석
신승엽
,
최희원
,
김한준
한국콘크리트학회 학술대회 논문집
2019
.05
최근 본 자료
댓글(0)
0