RA-DIT (Lin et al., 2023) and RECITE (Sun et al., 2023) emphasize enhancements through internal data modifications. RA-DIT distinguishes between fine-tuning datasets for LLMs and retrievers, aiming to bolster the LLM's contextual comprehension and the retriever's ability to align with queries. RECITE, on the other hand, utilizes passage hints and synthetic question-passage pairs to increase the variety and relevance of its generated recitations and responses. This approach seeks to broaden the model's knowledge base and improve its response accuracy.
RA-DIT(Lin et al., 2023)과 RECITE(Sun et al., 2023)는 내부 데이터 수정을 통한 개선을 강조합니다. RA-DIT는 LLM과 retriever용 Fine-tuning 데이터 세트를 구분하여 LLM의 문맥 이해력과 retriever의 쿼리 정렬 능력을 강화하는 것을 목표로 합니다. 반면에 RECITE는 구절 힌트와 합성 질문-구절 쌍을 활용하여 생성된 암송 및 응답의 다양성과 관련성을 높입니다. 이 접근 방식은 모델의 지식 기반을 넓히고 응답 정확도를 향상시키는 것을 목표로 합니다.
RA-DIT(Lin et al., 2023)과 RECITE(Sun et al., 2023)는 내부 데이터 수정을 통한 개선을 강조합니다. RA-DIT는 LLM과 검색기용 미세 조정 데이터 세트를 구분하여 LLM의 문맥 이해력과 검색기의 쿼리 정렬 능력을 강화하는 것을 목표로 합니다. 반면에 RECITE는 구절 힌트와 합성 질문-구절 쌍을 활용하여 생성된 암송 및 응답의 다양성과 관련성을 높입니다. 이 접근 방식은 모델의 지식 기반을 넓히고 응답 정확도를 향상시키는 것을 목표로 합니다.