Instruction tuning has been shown to be very effective at improving the overall quality of the model, with a particular emphasis on its zero-shot and reasoning capabilities. However, despite these advantages, instruction tuning does not necessarily teach the model new knowledge (Ouyang et al., 2022; Chung et al., 2022; Mitra et al., 2023; Chia et al., 2023; Zhou et al., 2023). As such, instruction tuning alone is not a viable solution to the knowledge injection problem.
Instruction Tuning은 특히 zero-shot 및 추론 기능에 중점을 두고 모델의 전반적인 품질을 개선하는 데 매우 효과적인 것으로 나타났습니다. 그러나 이러한 장점에도 불구하고 Instruction Tuning이 반드시 모델에게 새로운 지식을 가르치는 것은 아닙니다(Ouyang et al., 2022; Chung et al., 2022; Mitra et al., 2023; Chia et al., 2023; Zhou et al., 2023). 따라서 Instruction Tuning만으로는 지식 주입 문제에 대한 실행 가능한 해결책이 될 수 없습니다.
명령어 튜닝은 특히 제로 샷 및 추론 기능에 중점을 두고 모델의 전반적인 품질을 개선하는 데 매우 효과적인 것으로 나타났습니다. 그러나 이러한 장점에도 불구하고 명령어 튜닝이 반드시 모델에게 새로운 지식을 가르치는 것은 아닙니다(Ouyang et al., 2022; Chung et al., 2022; Mitra et al., 2023; Chia et al., 2023; Zhou et al., 2023). 따라서 명령어 튜닝만으로는 지식 주입 문제에 대한 실행 가능한 해결책이 될 수 없습니다.