Model Selection We chose three models for inference evaluation: Llama2-7B (Touvron et al., 2023), Mistral-7B (Jiang et al., 2023), and Orca2-7B (Mitra et al., 2023). The choice of these models was meant to represent the most popular open-source base models and an instruction-tuned model across various baseline capabilities. Additionally, we selected _bge-large-en_(Xiao et al., 2023) as the embedding model for the RAG component and used FAISS (Johnson et al., 2019) as its vector-store. This embedding model is currently the SOTA of open-source embedding models, according to the HuggingFace MTEB leaderboard4.
모델 선택 추론 평가를 위해 세 가지 모델을 선택했습니다: Llama2-7B(Touvron et al., 2023), Mistral-7B(Jiang et al., 2023), Orca2-7B(Mitra et al., 2023)의 세 가지 모델을 선택했습니다. 이 모델들은 다양한 기준 능력에서 가장 인기 있는 오픈 소스 기본 모델과 Instruction-tuned 모델을 대표하기 위한 것이었습니다. 또한, RAG 구성 요소의 임베딩 모델로 _bge-large-en_(Xiao et al., 2023)을 선택하고, 벡터 저장소로 FAISS(Johnson et al., 2019)를 사용했습니다. 이 임베딩 모델은 현재 HuggingFace MTEB 리더보드4에 따르면 오픈 소스 임베딩 모델의 SOTA입니다.
모델 선택 추론 평가를 위해 세 가지 모델을 선택했습니다: Llama2-7B(Touvron et al., 2023), Mistral-7B(Jiang et al., 2023), Orca2-7B(Mitra et al., 2023)의 세 가지 모델을 선택했습니다. 이 모델들은 다양한 기준 능력에서 가장 인기 있는 오픈 소스 기본 모델과 명령어 튜닝 모델을 대표하기 위한 것이었습니다. 또한, RAG 구성 요소의 임베딩 모델로 _bge-large-en_(Xiao et al., 2023)을 선택하고, 벡터 저장소로 FAISS(Johnson et al., 2019)를 사용했습니다. 이 임베딩 모델은 현재 HuggingFace MTEB 리더보드4에 따르면 오픈 소스 임베딩 모델의 SOTA입니다.