**Remaining Issues.** In this part, we further discuss several important issues to apply LLMs to improve IR systems. First, though LLMs are capable of being as general-purpose task solvers, they are not directly well suited for existing IR systems: they require high overhead for inference [774, 782], have limitations in modeling long texts or document lists [778], and need special adaptation (_e.g._, instruction tuning) to perform the text ranking task [795]. Therefore, more systematic approaches to adapt LLMs for modern IR systems should be investigated, to leverage their benefits and meanwhile overcome these limitations. Secondly, the advent of LLMs sheds lights on the development of new information seeking ways (_e.g._, New Bing). It is meaningful to explore how to reshape the architecture and paradigm of IR by integrating the LLMs' capacities and the merits of existing IR systems [796]. Thirdly, existing work mainly focuses on text retrieval tasks, lacking a comprehensive consideration of multimodal information sources. As will be discussed in Section 8.1.4, multimodal large language models [797] are also widely studied, making it feasible to develop more powerful multimedia retrieval systems.
**현안**. 이 부분에서는 LLM을 적용하여 IR 시스템을 개선하기 위한 몇 가지 중요한 문제에 대해 추가로 논의합니다. 첫째, LLM은 범용 태스크 솔버로 사용할 수 있지만 기존 IR 시스템에는 직접 적합하지 않습니다. 추론을 위해 높은 오버헤드가 필요하고[774, 782], 긴 텍스트나 문서 목록을 모델링하는 데 한계가 있으며[778], 텍스트 순위 지정 작업을 수행하기 위해 특별한 적응(_예: Instruction Tuning)이 필요합니다[795]. 따라서 LLM의 장점을 활용하는 동시에 이러한 한계를 극복하기 위해 최신 IR 시스템에 LLM을 적용하는 보다 체계적인 접근 방식을 연구해야 합니다. 둘째, LLM의 등장으로 새로운 정보 탐색 방식(예: New Bing)의 개발에 조명이 비춰졌습니다. LLM의 역량과 기존 IR 시스템의 장점을 통합하여 IR의 아키텍처와 패러다임을 재구성하는 방법을 모색하는 것은 의미 있는 일입니다[796]. 셋째, 기존 연구는 주로 텍스트 검색 작업에 초점을 맞추고 있어 멀티모달 정보 소스에 대한 포괄적인 고려가 부족합니다. 8.1.4절에서 논의할 것처럼 멀티모달 Large Language Models[797]도 널리 연구되고 있어 보다 강력한 멀티미디어 검색 시스템을 개발하는 것이 가능해졌습니다.
**현안**. 이 부분에서는 LLM을 적용하여 IR 시스템을 개선하기 위한 몇 가지 중요한 문제에 대해 추가로 논의합니다. 첫째, LLM은 범용 태스크 솔버로 사용할 수 있지만 기존 IR 시스템에는 직접 적합하지 않습니다. 추론을 위해 높은 오버헤드가 필요하고[774, 782], 긴 텍스트나 문서 목록을 모델링하는 데 한계가 있으며[778], 텍스트 순위 지정 작업을 수행하기 위해 특별한 적응(_예: 지시 조정)이 필요합니다[795]. 따라서 LLM의 장점을 활용하는 동시에 이러한 한계를 극복하기 위해 최신 IR 시스템에 LLM을 적용하는 보다 체계적인 접근 방식을 연구해야 합니다. 둘째, LLM의 등장으로 새로운 정보 탐색 방식(예: New Bing)의 개발에 조명이 비춰졌습니다. LLM의 역량과 기존 IR 시스템의 장점을 통합하여 IR의 아키텍처와 패러다임을 재구성하는 방법을 모색하는 것은 의미 있는 일입니다[796]. 셋째, 기존 연구는 주로 텍스트 검색 작업에 초점을 맞추고 있어 멀티모달 정보 소스에 대한 포괄적인 고려가 부족합니다. 8.1.4절에서 논의할 것처럼 멀티모달 대규모 언어 모델[797]도 널리 연구되고 있어 보다 강력한 멀티미디어 검색 시스템을 개발하는 것이 가능해졌습니다.