**vLLM**[229] is a fast and easy-to-use library for LLM inference and serving. vLLM seamlessly supports many Hugging Face models, including the following architectures: Aquila, Baichuan, BLOOM, ChatGLM, DeciLM, Falcon, GPT BigCode, LLaMA, LLaMA 2, Mistral, Mistral, MPT, OPT, Qwen, Yi, and many more.
**vLLM**[229]은 LLM 추론 및 서비스를 위한 빠르고 사용하기 쉬운 라이브러리입니다. vLLM은 다음과 같은 아키텍처를 포함한 많은 Hugging Face 모델을 원활하게 지원합니다: Aquila, Baichuan, BLOOM, ChatGLM, DeciLM, Falcon, GPT BigCode, LLaMA, LLaMA 2, Mistral, Mistral, MPT, OPT, Qwen, Yi 등 다양한 모델을 지원합니다.
**vLLM**[229]은 LLM 추론 및 서비스를 위한 빠르고 사용하기 쉬운 라이브러리입니다. vLLM은 다음과 같은 아키텍처를 포함한 많은 Hugging Face 모델을 원활하게 지원합니다: 아쿠일라, 바이추안, 블룸, 챗글램, 데시아이엘엠, 팔콘, GPT 빅코드, 라마, 라마 2, 미스트랄, 미스트랄, 엠피티, 옵티, 퀸, 이 등 다양한 모델을 지원합니다.