지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 저널정보
- Korean Institute of Information Scientists and Engineers 정보과학회 컴퓨팅의 실제 논문지 정보과학회 컴퓨팅의 실제 논문지 제28권 제3호
- 발행연도
- 2022.3
- 수록면
- 153 - 159 (7page)
- DOI
- 10.5626/KTCP.2022.28.3.153
이용수
초록· 키워드
오류제보하기
다중 도메인 응답 생성은 하나 이상의 도메인에 대해 입력되는 발화에 응답을 생성하는 문제이다. 여러 도메인을 대응해야 하는 환경에서 다중 도메인 응답 생성은 기존에 학습된 도메인뿐만 아니라 새로이 추가되는 도메인에 대해서도 적절히 응답할 수 있어야 한다. 기존 연구들은 기학습된 응답 생성모델에 새로이 추가되는 도메인의 데이터로 미세 조정하였다. 하지만, 위 방법들은 기학습된 도메인에 대해 적절히 응답을 생성하지 못하거나 도메인과 무관한 일반적인 대답을 생성하는 문제가 있다. 본 논문에서는 기억재현 지속학습 기반 다중 도메인 응답 생성 모델을 구축하는 방법을 제안한다. 기억재현 지속학습 기반 응답 생성 모델은 이전 도메인 발화-응답 데이터 중 대표 데이터를 메모리에 저장해두고, 새로운 도메인의 데이터와 메모리에 저장된 데이터를 함께 활용하여 학습한다. 기학습된 도메인 중 일부분을 메모리에 저장 및 학습에 활용하여 새로운 도메인을 위해 모델을 갱신할지라도 도메인에 특화된 대답을 생성할 수 있다. 도메인에 특화된 대표 데이터를 생성하기 위해 본 논문에서는 k-평균 군집화를 활용한다. 실험에서 총 5개 도메인에 대해 순차적으로 학습하고 모든 도메인에 대해 응답을 제대로 생성하는지를 평가하였다. 실험 결과 제안한 응답 생성 모델이 모든 도메인에서 기존 비교 모델보다 우수한 성능을 보였다. 제안한 방법은 각 도메인별 성능 비교에서 비교 모델 대비 최대 4.45 BLEU 성능 향상을 얻었다. 뿐만 아니라 정성적 평가를 통해 제안한 방법이 비교 모델에 비해 도메인에 특화된 응답을 생성하는 것을 확인할 수 있었다.
목차
요약
Abstract
1. 서론
2. 기억재현 지속학습 다중 도메인 응답 생성
3. 실험
4. 결과분석
5. 결론
References
참고문헌 (13)
참고문헌 신청
Lowe et al., "The Ubuntu Dialogue Corpus: A Large Dataset for Research in Unstructured Multi-Turn Dialogue Systems," Proc. of SIGDIAL, pp. 285-294, 2015.
Wen et al., "A Network-based End-to-End Trainable Task-oriented Dialogue System," Proc. of ACL, pp. 438-449, 2017.
Madotto et al., "Continual Learning in Task-Oriented Dialogue Systems," ArXiv, abs/2012.15504, 2020.
Liu and Mazumder, "Lifelong and Continual Learning Dialogue Systems: Learning during Conversation," Proc. of AAAI, pp. 15058-15063, 2021.
McCloskey and Cohen, "Catastrophic Interference In Connectionist Networks: The Sequential Learning Problem," Psychology of learning and motivation, Academic Press, Vol. 24, pp. 109-165, 1989.
Wen et al., "A Network-based End-to-End Trainable Task-oriented Dialogue System," Proc. of ACL, pp. 438-449, 2017.
Madotto et al., "Continual Learning in Task-Oriented Dialogue Systems," ArXiv, abs/2012.15504, 2020.
Liu and Mazumder, "Lifelong and Continual Learning Dialogue Systems: Learning during Conversation," Proc. of AAAI, pp. 15058-15063, 2021.
McCloskey and Cohen, "Catastrophic Interference In Connectionist Networks: The Sequential Learning Problem," Psychology of learning and motivation, Academic Press, Vol. 24, pp. 109-165, 1989.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
도메인 특수성이 도메인 특화 사전학습 언어모델의 성능에 미치는 영향
지능정보연구
2022 .12
-
딥러닝 기반의 도메인 적응 기술: 서베이
방송공학회논문지
2022 .07
-
Robust Korean Table Machine Reading Comprehension across Various Domains
Journal of KIISE
2023 .12
-
Korean Semantic Role Labeling Using Domain Adaptation Technique
Journal of KIISE
2015 .04
-
능동적 도메인 선택을 이용한 교차 도메인 추천 시스템에 관한 연구
한국정보기술학회논문지
2019 .10
-
단일 도메인 대화 모델에 지속학습기법을 적용한 다중 도메인 대화 모델
한국정보과학회 학술발표논문집
2021 .06
-
교차 도메인 혼합 샘플링 기법을 활용한 준 지도 학습 기반 도메인 적응 기법
한국차세대컴퓨팅학회 논문지
2021 .12
-
사전 학습 언어모델 기반 오픈 도메인에서의 한국어 대화 생성
한국정보과학회 학술발표논문집
2022 .06
-
효율적인 이상 탐지를 위한 적대적 도메인 적응 기법
디지털콘텐츠학회논문지
2023 .02
-
에너지 도메인에서의 전이 학습 적용 방안에 관한 연구
한국통신학회 학술대회논문집
2022 .06
-
객체 검출을 위한 도메인 기반의 모델 학습 프레임워크
한국정보과학회 학술발표논문집
2021 .06
-
특정 도메인을 위한 질의응답 시스템에서의 불확실성 회피능력에 대한 고찰
대한산업공학회 춘계공동학술대회 논문집
2021 .06
-
상 정보를 활용한 도메인 일반화 연구
대한산업공학회 추계학술대회 논문집
2022 .11
-
현대 딥러닝 네트워크의 과신뢰 문제 및 캘리브레이션 기법 연구
한국통신학회 학술대회논문집
2022 .02
-
도메인의 통계정보를 이용한 감성분석
한국정보과학회 학술발표논문집
2017 .12
-
Adaptive Cross-Domain Recommendation Model based on Association Analysis
한국정보기술학회논문지
2022 .02
-
도메인 특수성이 도메인 특화 사전학습 언어모델의 성능에 미치는 영향
한국지능정보시스템학회 학술대회논문집
2022 .11
-
선제 대응을 위한 의심 도메인 추론 방안
정보보호학회논문지
2016 .04
-
도메인 특성을 고려한 사용자 임베딩 기반 교차 도메인 추천
한국정보과학회 학술발표논문집
2019 .12
-
클러스터 일관성을 기반으로 한 비지도 도메인 적응 사람 재인식
한국방송미디어공학회 학술발표대회 논문집
2020 .11
이 논문의 저자 정보
이 논문과 함께 이용한 논문
최근 본 자료
댓글(0)
0