Source ModelsThe LLM component inside a VLM can be regarded as a standalone LLM, with the extra capability of understanding visual _soft prompts_. From this perspective, by fixing the vision encoder and the projection network and only focusing on the LLM component, it is straightforward to apply the methodologies detailed in Section 3 to produce a new LLM with expanded capabilities.
소스 모델VLM 내부의 LLM 구성 요소는 시각적 _soft prompts_를 이해하는 추가 기능을 갖춘 독립형 LLM으로 간주할 수 있습니다. 이 관점에서 vision encoder와 projection network를 고정하고 LLM 구성 요소에만 집중하여 섹션 3에서 자세히 설명한 방법론을 적용하여 확장된 기능을 갖춘 새로운 LLM을 생성하는 것은 간단합니다.
소스 모델VLM 내부의 LLM 구성 요소는 시각적 _소프트 프롬프트_를 이해하는 추가 기능을 갖춘 독립형 LLM으로 간주할 수 있습니다. 이 관점에서 시각 인코더와 투영 네트워크를 고정하고 LLM 구성 요소에만 집중하여 섹션 3에서 자세히 설명한 방법론을 적용하여 확장된 기능을 갖춘 새로운 LLM을 생성하는 것은 간단합니다.