The aforementioned findings enable us to transfer LLaMA's capabilities of language generation and following instructions to non-English languages at minimal cost. Based on evaluation results from four widely used standardized testing benchmarks (C-Eval, GAOKAOBench, MMLU, AGI-Eval) and an instruction evaluation benchmark LLM-Eval, we achieve comparable knowledge level and response quality to the state-of-the-art Open Chinese LLaMA, while using less than \(1\%\) of the training data. Furthermore, extension experiments on another 13 low-resource languages also exhibit similar trends. We aim for the experimental results and analyses in this paper to provide assistance and guidance to the community in constructing non-English LLMs.
앞서 언급한 연구 결과를 통해 LLaMA의 언어 생성 및 Instruction 수행 기능을 비용을 최소화하면서 비영어 언어로 전송할 수 있습니다. 널리 사용되는 4가지 표준화 테스트 벤치마크(C-Eval, GAOKAOBench, MMLU, AGI-Eval)와 Instruction 평가 벤치마크 LLM-Eval의 평가 결과를 바탕으로, 저희는 1% 미만의 훈련 데이터를 사용하면서도 최신 오픈 중국어 LLaMA와 비슷한 수준의 지식과 응답 품질을 달성했습니다. 또한 13개의 저자원 언어에 대한 확장 실험에서도 비슷한 추세를 보였습니다. 이 논문의 실험 결과와 분석이 비영어 LLM을 구축하는 커뮤니티에 도움이 되고 지침이 되기를 바랍니다.
앞서 언급한 연구 결과를 통해 언어 생성 및 명령어 수행 기능을 비용을 최소화하면서 비영어 언어로 전송할 수 있습니다. 널리 사용되는 4가지 표준화 테스트 벤치마크(C-Eval, GAOKAOBench, MMLU, AGI-Eval)와 명령어 평가 벤치마크 LLM-Eval의 평가 결과를 바탕으로, 저희는 1% 미만의 훈련 데이터를 사용하면서도 최신 오픈 중국어 LLaMA와 비슷한 수준의 지식과 응답 품질을 달성했습니다. 또한 13개의 저자원 언어에 대한 확장 실험에서도 비슷한 추세를 보였습니다. 이 논문의 실험 결과와 분석이 비영어 LLM을 구축하는 커뮤니티에 도움이 되고 지침이 되기를 바랍니다.