**text-generation-inference**[230] is a toolkit for deploying and serving Large Language Models (LLMs). TGI enables high-performance text generation for the most popular open-source LLMs, including Llama, Falcon, StarCoder, BLOOM, GPT-NeoX, and more.
**text-generation-inference**[230]은 Large Language Models (LLMs)을 배포하고 서비스하는 툴킷입니다. TGI는 Llama, Falcon, StarCoder, BLOOM, GPT-NeoX 등 가장 인기 있는 오픈 소스 LLM에 대한 고성능 텍스트 생성을 가능하게 합니다.
텍스트 생성 추론**[230]은 대규모 언어 모델(LLM)을 배포하고 서비스하는 툴킷입니다. TGI는 Llama, Falcon, StarCoder, BLOOM, GPT-NeoX 등 가장 인기 있는 오픈 소스 LLM에 대한 고성능 텍스트 생성을 가능하게 합니다.