The specific approach and instruction datasets used to instruction-tune an LLM varies, but, generally speaking, instruction tuned models outperform their original foundation models they are based on. For example, InstructGPT [59] outperforms GPT-3 on most benchmarks. The same is true for Alpaca [62] when compared to LLMA.
LLM을 Instruction Tuning하는 데 사용되는 구체적인 접근 방식과 Instruction 데이터 세트는 다양하지만, 일반적으로 Instruction Tuning된 모델은 기반이 되는 기존 foundation 모델보다 성능이 뛰어납니다. 예를 들어, InstructGPT [59]는 대부분의 벤치마크에서 GPT-3보다 성능이 뛰어납니다. LLMA와 비교할 때 Alpaca [62]도 마찬가지입니다.
LLM을 지침 조정하는 데 사용되는 구체적인 접근 방식과 지침 데이터 세트는 다양하지만, 일반적으로 지침 조정 모델은 기반이 되는 기존 기반 모델보다 성능이 뛰어납니다. 예를 들어, InstructGPT [59]는 대부분의 벤치마크에서 GPT-3보다 성능이 뛰어납니다. LLMA와 비교할 때 알파카 [62]도 마찬가지입니다.