The context manager is responsible for managing the context provided to LLM and the generation process given certain context. It primarily involves two crucial functions: context snapshot and restoration, and context window management.
컨텍스트 관리자는 LLM에 제공된 컨텍스트와 특정 컨텍스트가 주어진 생성 과정을 관리하는 역할을 합니다. 주로 두 가지 중요한 기능을 포함합니다: 컨텍스트 스냅샷 및 복원, 그리고 컨텍스트 윈도우 관리.
컨텍스트 관리자는 LLM에 제공되는 컨텍스트와 특정 컨텍스트가 주어졌을 때 생성 프로세스를 관리하는 역할을 담당합니다. 여기에는 주로 두 가지 중요한 기능, 즉 컨텍스트 스냅샷 및 복원과 컨텍스트 창 관리가 포함됩니다.