DoQAWe use the test set of DoQA for the evaluation. Its test set consists of 1200 dialogues with 5394 user-agent turns across Cooking, Travel and Movie domains. Among 5394 user-agent turns, there are 1479 (around 27.4%) unanswerable questions. We use the same strategy as the one mentioned in QuAC dataset to incorporate unanswerable samples into the evaluation.
DoQA는 평가를 위해 DoQA의 test set을 사용합니다. test set은 요리, 여행 및 영화 도메인에 걸쳐 5394개의 user-agent turn이 있는 1200개의 대화로 구성됩니다. 5394개의 user-agent turn 중 1479개(약 27.4%)가 답변할 수 없는 질문입니다. 답변할 수 없는 샘플을 평가에 통합하기 위해 QuAC dataset에서 언급한 것과 동일한 전략을 사용합니다.
DoQA는 평가를 위해 DoQA의 테스트 세트를 사용합니다. 테스트 세트는 요리, 여행 및 영화 도메인에 걸쳐 5394개의 사용자 에이전트 턴이 있는 1200개의 대화로 구성됩니다. 5394개의 사용자 에이전트 턴 중 1479개(약 27.4%)가 답변할 수 없는 질문입니다. 답변할 수 없는 샘플을 평가에 통합하기 위해 QuAC 데이터 세트에서 언급한 것과 동일한 전략을 사용합니다.