In addition, to reduce hallucinated answers in unanswerable cases, we aim to empower our model to explicitly indicate it when the answer cannot be found within the given context. To obtain these unanswerable data samples, we requested annotators to provide all context locations to the user question. Hence, it enabled us to construct unanswerable scenarios by deleting the text from the corresponding locations in the context. After deleting the relevant text to the question, we use a sentence, "Sorry. I cannot find the answer based on the context", as the response for the unanswerable questions. Finally, we construct another 1.5k user-agent turns with unanswerable annotations, which provides a good trade-off of answerable and unanswerable cases (see SS6.5 for details).
또한, 답변할 수 없는 경우에 있어서 hallucinated 답변을 줄이기 위해, 주어진 context 내에서 답변을 찾을 수 없는 경우에 이를 명시적으로 표시할 수 있도록 모델을 강화하는 것을 목표로 합니다. 이러한 답변할 수 없는 데이터 샘플을 얻기 위해 주관자에게 사용자 질문에 대한 모든 context 위치를 제공하도록 요청했습니다. 따라서 문맥의 해당 위치에서 텍스트를 삭제하여 답변할 수 없는 시나리오를 구성할 수 있었습니다. 질문과 관련된 텍스트를 삭제한 후, 답변할 수 없는 질문에 대한 응답으로 "죄송합니다. 문맥에 따라 답변을 찾을 수 없습니다."라는 문장을 사용합니다. 마지막으로, 답변 가능한 경우와 답변 불가능한 경우의 적절한 균형을 제공하는 답변 불가능한 주석으로 1.5k개의 사용자 에이전트 턴을 추가로 구성합니다(자세한 내용은 SS6.5 참조).
또한, 답변할 수 없는 경우에 있어서 홀루싱된 답변을 줄이기 위해, 주어진 컨텍스트 내에서 답변을 찾을 수 없는 경우에 이를 명시적으로 표시할 수 있도록 모델을 강화하는 것을 목표로 합니다. 이러한 답변할 수 없는 데이터 샘플을 얻기 위해 주관자에게 사용자 질문에 대한 모든 컨텍스트 위치를 제공하도록 요청했습니다. 따라서 문맥의 해당 위치에서 텍스트를 삭제하여 답변할 수 없는 시나리오를 구성할 수 있었습니다. 질문과 관련된 텍스트를 삭제한 후, 답변할 수 없는 질문에 대한 응답으로 "죄송합니다. 문맥에 따라 답변을 찾을 수 없습니다."라는 문장을 사용합니다. 마지막으로, 답변 가능한 경우와 답변 불가능한 경우의 적절한 균형을 제공하는 답변 불가능한 주석으로 1.5k개의 사용자 에이전트 턴을 추가로 구성합니다(자세한 내용은 SS6.5 참조).