While final accuracy provides a good measure of performance on the pre-training objective, LLMs abilities are typically judged by their performance on evaluation tasks. With the caveat that we use base models, that is our models have not been instruction-tuned, fine-tuned, or adapted to human preferences in any way, we present their evaluation on popular benchmarks in this section. We refer the reader to Sec. 5.4 of the main manuscript and Sec. A.5 of the appendix for a more detailed description of the chosen evaluation tasks.
최종 정확도는 사전 학습 목표에 대한 성능을 잘 측정할 수 있지만, LLM의 능력은 일반적으로 평가 작업의 성능에 따라 평가됩니다. 기본 모델을 사용한다는 점을 전제로 하며, 이는 모델이 어떤 식으로든 Instruction Tuning, Fine-tuning 또는 인간의 선호도에 맞게 조정되지 않았다는 것을 의미합니다. 이 섹션에서는 인기 있는 벤치마크에 대한 평가를 제시합니다. 선택한 평가 작업에 대한 자세한 설명은 본문의 섹션 5.4와 부록의 섹션 A.5를 참조하십시오.
최종 정확도는 사전 학습 목표에 대한 성능을 잘 측정할 수 있지만, LLM의 능력은 일반적으로 평가 작업의 성능에 따라 평가됩니다. 기본 모델을 사용한다는 점을 전제로 하며, 이는 모델이 어떤 식으로든 지시 튜닝, 미세 조정 또는 인간의 선호도에 맞게 조정되지 않았다는 것을 의미합니다. 이 섹션에서는 인기 있는 벤치마크에 대한 평가를 제시합니다. 선택한 평가 작업에 대한 자세한 설명은 본문의 섹션 5.4와 부록의 섹션 A.5를 참조하십시오.