We ask the annotators to verify the facts in models' outputs and determine which model provides a more accurate response to the question. We use Amazon Mechanical Turk platform to conduct the human evaluation. The details of our human evaluation instructions and the interface shown to annotators are illustrated in Figure 3.
주석가에게 모델 출력의 사실을 확인하고 어떤 모델이 질문에 대해 더 정확한 답변을 제공하는지 결정하도록 요청합니다. Amazon Mechanical Turk 플랫폼을 사용하여 human evaluation을 수행합니다. human evaluation 지침의 세부 사항과 주석가에게 표시되는 인터페이스는 그림 3에 나와 있습니다.
주석가에게 모델 출력의 사실을 확인하고 어떤 모델이 질문에 대해 더 정확한 답변을 제공하는지 결정하도록 요청합니다. Amazon Mechanical Turk 플랫폼을 사용하여 사람의 평가를 수행합니다. 인간 평가 지침의 세부 사항과 주석가에게 표시되는 인터페이스는 그림 3에 나와 있습니다.