We use the prompt format mentioned in SSA.2 for benchmarks in ChatQA, Llama2-Chat, GPT-3.5-turbo and GPT-4. We keep the {Context for Latest Question} the same for all models, while we adjust the {Instruction} for the baselines (i.e., Llama2-Chat, GPT-3.5-turbo and GPT-4) to ensure they do not get sub-optimal results. We use different instructions for test benchmarks with different answer types (e.g., long answer, short answer, arithmetic calculation).
ChatQA, Llama2-Chat, GPT-3.5-turbo 및 GPT-4의 벤치마크에는 SSA.2에 언급된 prompt 형식을 사용합니다. 모든 모델에 대해 {최신 질문에 대한 Context}를 동일하게 유지하고, baseline(예: Llama2-Chat, GPT-3.5-turbo 및 GPT-4)에 대해 {Instruction}을 조정하여 최적이 아닌 결과를 얻지 않도록 합니다. 답변 유형이 다른 테스트 벤치마크에는 서로 다른 instructions를 사용합니다(예: 장문 답변, 단문 답변, arithmetic calculation).
ChatQA, Llama2-Chat, GPT-3.5-turbo 및 GPT-4의 벤치마크에는 SSA.2에 언급된 프롬프트 형식을 사용합니다. 모든 모델에 대해 {최신 질문에 대한 컨텍스트}를 동일하게 유지하고, 베이스라인(예: Llama2-Chat, GPT-3.5-turbo 및 GPT-4)에 대해 {지침}을 조정하여 최적이 아닌 결과를 얻지 않도록 합니다. 답변 유형이 다른 테스트 벤치마크에는 서로 다른 지침을 사용합니다(예: 장문 답변, 단문 답변, 산술 계산).