The results are shown in Table 5. We sample multiple times from the models for each question and if any one of them contains the correct answer, then it is counted as success. The accuracy is relatively low in general due to the small model size in terms of number of parameters, limited pre-training and lack of any finetuning for both baselines and our method.
결과는 표 5에 나와 있습니다. 각 질문에 대해 모델에서 여러 번 샘플링하고 그 중 하나에 정답이 포함되어 있으면 성공으로 계산합니다. baseline과 우리 방법 모두에서 매개변수 수 측면에서 모델 크기가 작고 사전 학습이 제한적이며 Fine-tuning이 부족하기 때문에 일반적으로 정확도가 상대적으로 낮습니다.
결과는 표 5에 나와 있습니다. 각 질문에 대해 모델에서 여러 번 샘플링하고 그 중 하나에 정답이 포함되어 있으면 성공으로 계산합니다. 기본값과 우리 방법 모두에서 매개변수 수 측면에서 모델 크기가 작고 사전 학습이 제한적이며 미세 조정이 부족하기 때문에 일반적으로 정확도가 상대적으로 낮습니다.