지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 저널정보
- Korean Institute of Information Scientists and Engineers Journal of KIISE Journal of KIISE Vol.48 No.5
- 발행연도
- 2021.5
- 수록면
- 501 - 509 (9page)
- DOI
- 10.5626/JOK.2021.48.5.501
이용수
초록· 키워드
오류제보하기
자연어 질의응답 시스템과 관련한 이전의 연구들은 주어진 질문과 단락으로부터 정확한 정답을 추출하는 문제에 초점을 맞추고 있다. 그러나, 기계독해에서 오픈 도메인 질의응답으로 문제를 확장하였을 때, 정답이 포함된 단락을 잘 찾는 것이 기계독해 못지않은 중요한 요소이다. DrQA에서는 초기 검색 단계를 포함하여 질의응답을 하였을 때 Exact Match@Top1 성능이 69.5%에서 27.1%로 하락했다고 평가하였다. 본 논문에서는 질의응답 시스템 성능 향상을 위해 2단계 단락 재순위화 모델을 제안한다. 2단계 단락 재순위화 모델은 심볼릭 순위화 모델과 뉴럴 순위화 모델의 결과를 통합하여 다시 재순위화하는 모델이다. 심볼릭 순위화 모델은 CatBoost 알고리즘과 질문과 단락 간의 자질을 기반으로 단락을 순위화 하고, 뉴럴 순위화 모델은 한국어 딥러닝 언어모델(KorBERT)을 사후학습하여 순위화하였다. 2단계 모델은 뉴럴 리그레션 모델에 기반하여 순위화하였다. 본 논문에서는 특징이 다른 순위화 모델을 결합하여 성능을 극대화하였고, 최종적으로 제안한 모델은 1,000건의 질문을 평가하였을 때 MRR 기준 85.8%과 BinaryRecall@Top1기준 82.2%의 성능을 보였고, 각 성능은 베이스라인 모델보다 17.3%(MRR), 22.3%(BR@Top1)이 향상되었다.
목차
요약
Abstract
1. 서론
2. 관련 연구
3. 제안방법
4. 평가
5. 결론
References
참고문헌 (20)
참고문헌 신청
D. Chen, A. Fisch, J. Weston, and A. Bordes, "Reading Wikipedia to Answer Open-Domain Questions," Proc. of the 55th Annual Meeting of the Association for Computational Linguistics 2017, pp. 1870-1879, 2017. (in Canada)
P. Rajpurkar, J. Zhang, K. Lopyrev, and P. Liang, "SQuAD: 100,000+ Questions for Machine Comprehension of Text," Proc. of the 2016 Conference on Empirical Methods in Natural Language Processing, pp. 2383-2392, 2016. (in USA)
P. Bajaj, D. Campos, N. Craswell, L. Deng, J. Gao, X. Liu, R. Majumder, A. Mcnamara, B. Mitra, and T. Nguyen, "MS MARCO: A Human Generated MAchine Reading COmprehension Dataset," Proc. of the Workshop CoCo at NIPS 2016, 2016. (in Spain)
Z. Yang, P. Qi, S. Zhang, Y. Bengio, W. Cohen, R. Salakhutdinov, and C. Manning, "HOTPOTQA: A Dataset for Diverse, Explainable Multi-hop Question Answering," Proc. of the 2018 Conference on Empirical Methods in Natural Language Processing, pp. 2369-2380, 2018. (in Belgium)
T. Kwiatkowski, J. Palomaki, O. Redfield, M. Collins, A. Parikh, C. Alberti, D. Epstein, I. Polosukhin, J. Devlin, K. Lee, K. Toutanova, L. Jones, M. Kelcey, M. Chang, A. Dai, J. Uszkoreit, Q. Le, and S. Petrov, "Natural Questions: A Benchmark for Question Answering Research," Transactions of the Association for Computational Linguistics, Vol. 7, pp. 453-466, 2019.
P. Rajpurkar, J. Zhang, K. Lopyrev, and P. Liang, "SQuAD: 100,000+ Questions for Machine Comprehension of Text," Proc. of the 2016 Conference on Empirical Methods in Natural Language Processing, pp. 2383-2392, 2016. (in USA)
P. Bajaj, D. Campos, N. Craswell, L. Deng, J. Gao, X. Liu, R. Majumder, A. Mcnamara, B. Mitra, and T. Nguyen, "MS MARCO: A Human Generated MAchine Reading COmprehension Dataset," Proc. of the Workshop CoCo at NIPS 2016, 2016. (in Spain)
Z. Yang, P. Qi, S. Zhang, Y. Bengio, W. Cohen, R. Salakhutdinov, and C. Manning, "HOTPOTQA: A Dataset for Diverse, Explainable Multi-hop Question Answering," Proc. of the 2018 Conference on Empirical Methods in Natural Language Processing, pp. 2369-2380, 2018. (in Belgium)
T. Kwiatkowski, J. Palomaki, O. Redfield, M. Collins, A. Parikh, C. Alberti, D. Epstein, I. Polosukhin, J. Devlin, K. Lee, K. Toutanova, L. Jones, M. Kelcey, M. Chang, A. Dai, J. Uszkoreit, Q. Le, and S. Petrov, "Natural Questions: A Benchmark for Question Answering Research," Transactions of the Association for Computational Linguistics, Vol. 7, pp. 453-466, 2019.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
정보 검색 기반 기계독해 시스템을 위한 단락 재순위화 모델
한국정보과학회 학술발표논문집
2020 .07
-
질의응답 시스템을 위한 지역적 대비 추정 손실 기반 한국어 단락 순위화 모델
한국정보과학회 학술발표논문집
2021 .06
-
뉴럴 및 심볼릭 방법을 통합한 하이브리드 단락 검색
한국정보기술학회논문지
2022 .07
-
적대적 데이터 생성 기반 단락 재순위화 학습 프레임워크
한국정보기술학회논문지
2022 .10
-
Passage Re-ranking Method Based on Sentence Similarity Through Multitask Learning
Journal of KIISE
2020 .04
-
앵커와 질의재생성을 이용한 멀티홉 질의응답
한국정보과학회 학술발표논문집
2021 .12
-
질의어 확장을 이용한 단어 중요도 기반 단락 검색
한국정보기술학회논문지
2022 .01
-
Answer Snippet Retrieval for Question Answering of Medical Documents
Journal of KIISE
2016 .08
-
뉴로 심볼릭 관계 모델을 이용한 지식베이스 질의 응답
한국정보과학회 학술발표논문집
2020 .07
-
딥러닝과 정보검색을 결합한 질의응답 시스템
한국어정보학회 학술대회
2016 .01
-
자연어처리와 정보검색을 이용한 질의응답 시스템
한국정보과학회 학술발표논문집
2015 .06
-
정보검색 기반의 의학 분야 질의응답 시스템을 위한 질의 분석 방법
한국정보과학회 학술발표논문집
2016 .06
-
Performance Improvement of a Korean Open Domain Q&A System by Applying the Trainable Re-ranking and Response Filtering Model
Journal of KIISE
2023 .03
-
지식기반 시각적 질의응답을 위한 관련성 심볼 그래프 모델
한국정보과학회 학술발표논문집
2024 .06
-
심볼릭 인공지능을 위한 R 심볼릭 데이터분석
한국지능시스템학회 논문지
2017 .10
-
Multi-task Learning Based Re-ranker for External Knowledge Retrieval in Document-grounded Dialogue Systems
Journal of KIISE
2023 .07
-
데이터 기반 교량 유지관리 우선순위 평가
대한토목학회 학술대회
2023 .10
-
질의응답시스템에서 정답 특징에 관한 실험적 분석
디지털콘텐츠학회논문지
2018 .05
-
태양광발전시스템에서의 단락 사고 특성 분석
대한전기학회 학술대회 논문집
2019 .04
-
TensorFlow를 활용한 검색 키워드의 최적 순위 예측 알고리즘
한국통신학회논문지
2018 .08
이 논문의 저자 정보
이 논문과 함께 이용한 논문
파인 튜닝과 RAG의 통합적 활용을 통한 SLM 성능 향상 방안
김지윤
,
김민규
,
홍석준
외 1명
Proceedings of KIIT Conference
2024
.05
질의어 확장을 이용한 단어 중요도 기반 단락 검색
배용진
,
이공주
한국정보기술학회논문지
2022
.01
머신러닝을 활용한 응급실 내원 환자 퇴실 조치 결정 조기 예측
황하은
,
강현구
,
이의선
외 3명
대한산업공학회지
2021
.06
사용자의 입력 의도를 반영한 음절 N-gram 기반 한국어 띄어쓰기 및 붙여쓰기 오류 교정 시스템
박서연
,
옥철영
정보과학회 컴퓨팅의 실제 논문지
2021
.03
광고 글 필터링 모델 적용 및 성능 향상 방안
박래근
,
윤혁진
,
신의철
외 2명
한국산학기술학회 논문지
2020
.11
최근 본 자료
댓글(0)
0