**LLMs as IR Models.** Existing IR models can be overall categorized into _sparse models_ (relying on term-based lexical similarity) and _dense models_ (relying on embedding based semantic similarity) [740]. Specially, dense models are mainly implemented by fine-tuned PLMs (_e.g._, BERT). Compared to PLMs, LLMs have more strong model capacities in capturing text semantics, thus having the potential to improve existing dense IR models. However, due to the high overhead of LLMs, the majority of studies concentrate on employing LLMs as rerankers, aiming to refine the ranking of retrieved candidates. To achieve this, recent efforts often formulate special instructions that enable LLMs to perform reranking on a small set of provided candidate documents. Typically, such an approach does not necessitate model training, and achieve promising results compared with well-trained reranking methods [774, 775].
**IR 모델로서의 LLM**. 기존 IR 모델은 크게 _희소 모델_(용어 기반 어휘 유사성에 의존)과 _밀도 모델_(임베딩 기반 의미 유사성에 의존)로 분류할 수 있습니다[740]. 특히, 밀도 모델은 주로 Fine-tuned PLM(_예: BERT)으로 구현됩니다. LLM은 텍스트 의미를 포착하는 데 있어 더 강력한 모델 역량을 가지고 있으므로 기존의 밀도 IR 모델을 개선할 수 있는 잠재력을 가지고 있습니다. 그러나 LLM의 높은 오버헤드로 인해 대부분의 연구는 검색된 후보의 순위를 개선하는 것을 목표로 reranker로 LLM을 사용하는 데 집중하고 있습니다. 이를 위해 최근의 노력은 LLM이 제공된 후보 문서의 작은 집합에 대해 reranking을 수행할 수 있도록 특별한 Instruction을 공식화하는 데 중점을 두고 있습니다. 일반적으로 이러한 접근 방식은 모델 학습이 필요하지 않으며, 잘 훈련된 reranking 방법에 비해 유망한 결과를 얻을 수 있습니다[774, 775].
**IR 모델로서의 LLM**. 기존 IR 모델은 크게 _희소 모델_(용어 기반 어휘 유사성에 의존)과 _밀도 모델_(임베딩 기반 의미 유사성에 의존)로 분류할 수 있습니다[740]. 특히, 밀도 모델은 주로 미세 조정된 PLM(_예: BERT)으로 구현됩니다. LLM은 텍스트 의미를 포착하는 데 있어 더 강력한 모델 역량을 가지고 있으므로 기존의 밀도 IR 모델을 개선할 수 있는 잠재력을 가지고 있습니다. 그러나 LLM의 높은 오버헤드로 인해 대부분의 연구는 검색된 후보의 순위를 개선하는 것을 목표로 리랭커로 LLM을 사용하는 데 집중하고 있습니다. 이를 위해 최근의 노력은 LLM이 제공된 후보 문서의 작은 집합에 대해 리랭킹을 수행할 수 있도록 특별한 지침을 공식화하는 데 중점을 두고 있습니다. 일반적으로 이러한 접근 방식은 모델 학습이 필요하지 않으며, 잘 훈련된 리랭킹 방법에 비해 유망한 결과를 얻을 수 있습니다[774, 775].