In this report, we discuss the full-stack development of the Yi language model family. Yi-34B achieves GPT-3.5 matching performance and is deployable (thank to the 4/8-bit quantization) on consumer-grade devices, making it an ideal model for local deployment.
이 보고서에서는 Yi 언어 모델 제품군의 풀스택 개발에 대해 설명합니다. Yi-34B는 GPT-3.5에 필적하는 성능을 달성하며, 소비자급 장치에 배포할 수 있으므로(4/8-bit Quantization 덕분) 로컬 배포에 이상적인 모델입니다.
이 보고서에서는 Yi 언어 모델 제품군의 풀스택 개발에 대해 설명합니다. Yi-34B는 GPT-3.5에 필적하는 성능을 달성하며, 소비자급 장치에 배포할 수 있으므로(4/8비트 양자화 덕분) 로컬 배포에 이상적인 모델입니다.