Figure 9: Human evaluation in done using a Google sheet, with predictions from different models present in random order and the model information being anonymized. Our expert evaluators are required to read the instruction and input, refer to the target, and then select the rating for the model’s response from A/B/C/D, corresponding to the 4 levels described in §4.4.
그림 9: Google 시트를 사용하여 수행되는 인간 평가는 다양한 모델의 예측이 무작위 순서로 표시되고 모델 정보가 익명화됩니다. 전문 평가자는 Instruction과 입력을 읽고 대상을 참조한 다음 §4.4에 설명된 4단계에 해당하는 A/B/C/D 중 모델의 응답에 대한 등급을 선택해야 합니다.
그림 9: Google 시트를 사용하여 수행되는 인간 평가는 다양한 모델의 예측이 무작위 순서로 표시되고 모델 정보가 익명화됩니다. 전문 평가자는 지침과 입력을 읽고 대상을 참조한 다음 §4.4에 설명된 4단계에 해당하는 A/B/C/D 중 모델의 응답에 대한 등급을 선택해야 합니다.