**Baselines with retrievals.** We evaluate models augmented with retrieval at test time or during training. The first category includes standard RAG baselines, where an LM (Llama2, Alpaca) generates output given the query prepended with the top retrieved documents using the same retriever as in our system. It also includes Llama2-FT, where Llama2 is fine-tuned on all training data we use without the reflection tokens or retrieved passages. We also report the result of retrieval-augmented baselines with LMs trained with private data: Ret-ChatGPT and Ret-Llama2-chat, which deploy the same augmentation technique above, as well as perplexity.ai, an InstructGPT-based production search system.
**검색 기능이 있는 baseline.** 테스트 시간 또는 훈련 중에 검색 기능으로 증강된 모델을 평가합니다. 첫 번째 범주에는 표준 RAG baseline이 포함되며, 여기서 LM(Llama2, Alpaca)은 시스템과 동일한 retriever를 사용하여 검색된 상위 문서가 앞에 붙은 쿼리에 대해 출력을 생성합니다. 또한 reflection tokens이나 검색된 구절 없이 사용하는 모든 훈련 데이터에 대해 Llama2를 Fine-tuning한 Llama2-FT도 포함됩니다. 또한 비공개 데이터로 학습된 검색 증강 baseline의 결과인 Ret-ChatGPT와 Ret-Llama2-chat, 그리고 InstructGPT 기반의 프로덕션 검색 시스템인 perplexity.ai도 보고합니다.
**검색 기능이 있는 기본 라인.** 테스트 시간 또는 훈련 중에 검색 기능으로 증강된 모델을 평가합니다. 첫 번째 범주에는 표준 RAG 기본 라인이 포함되며, 여기서 LM(Llama2, 알파카)은 시스템과 동일한 검색기를 사용하여 검색된 상위 문서가 앞에 붙은 쿼리에 대해 출력을 생성합니다. 또한 반사 토큰이나 검색된 구절 없이 사용하는 모든 훈련 데이터에 대해 Llama2를 미세 조정한 Llama2-FT도 포함됩니다. 또한 비공개 데이터로 학습된 검색 증강 기본 라인의 결과인 Ret-ChatGPT와 Ret-Llama2-chat, 그리고 인스트럭트GPT 기반의 프로덕션 검색 시스템인 perplexity.ai도 보고합니다.