[매일 논문 초록 읽기 : 53일차] task-oriented dialog system의 구축과 평가를 진행할 수 있는 toolkit인 ConvLab-2

우리는 연구자들이 SOTA 모델들로 task-oriented dialogue system을 구축하고,  end-to-end 평가를 수행하고, 시스템의 약점을 진단할 수 있는 오픈소스 툴킷인 ConvLab-2를 소개한다. ConvLab의 후속작으로, ConvLab-2는 ConvLab의 프레임워크를 이어 받았지만, 더 강력한 대화 모델들을 포함하고 있고, 더 많은 데이터셋을 지원한다. 

 게다가, 우리는 연구자들이 대화 시스템을 진단하는 것을 돕기 위해 분석 도구와 대화형 도구를 개발하였다. 분석 도구들은 풍부한 통계 기능을 제공하고, 시뮬레이션 대화에서 발생하는 흔한 실수들을 요약해준다. 이는 에러 분석과 시스템 향상을 촉진한다. 대화형 도구들은 개발자들이 시스템과 상호작용하고 각 시스템 구성 요소의 output을 수정함으로써, 조립된 대화 시스템을 진단할 수 있는 유저 인터페이스를 제공한다.

제목 : ConvLab-2: An Open-Source Toolkit for Building, Evaluating, and Diagnosing Dialogue Systems
https://arxiv.org/abs/2002.04793