training corpus that excludes Chinese documents, leverages a different pre-training framework [29], and adopts a slightly different model architecture. Since the intermediate checkpoints of LLaMA are not available, we extract the pre-training loss and corresponding performance on six question answering and commonsense reasoning tasks from the figures in its original paper, and plot the points in Figure 3.
중국어 문서를 제외하고, 다른 pre-training 프레임워크[29]를 활용하고, 약간 다른 모델 아키텍처를 채택하는 학습 말뭉치. LLaMA의 중간 체크포인트를 사용할 수 없으므로 원 논문의 그림에서 6개의 question answering 및 commonsense reasoning 작업에 대한 pre-training loss와 해당 성능을 추출하여 그림 3에 점을 그려 넣었습니다.
중국어 문서를 제외하고, 다른 사전 학습 프레임워크[29]를 활용하고, 약간 다른 모델 아키텍처를 채택하는 학습 말뭉치. LLaMA의 중간 체크포인트를 사용할 수 없으므로 원 논문의 그림에서 6개의 질문 답변 및 상식 추론 작업에 대한 사전 학습 손실과 해당 성능을 추출하여 그림 3에 점을 그려 넣었습니다.