Some aspects of this work still warrant further research. For example, we focused on unsupervised training as our primary fine-tuning method, as opposed to instruction-tuning or RL-based methods. Researching combinations of various techniques, with diverse auxiliary knowledge bases, may yield improved results. This approach, combined with our hypothesis from Section 6, could further enhance our understanding of knowledge injection via FT.
이 작업의 몇 가지 측면은 여전히 추가 연구가 필요합니다. 예를 들어, Instruction Tuning이나 RL 기반 방법과 달리 비지도 훈련에 주안점을 둔 초점을 맞추었습니다. 다양한 보조 지식 기반을 사용하여 다양한 기법의 조합을 연구하면 더 나은 결과를 얻을 수 있습니다. 이러한 접근 방식은 섹션 6의 가설과 결합하여 Fine-tuning을 통한 지식 주입에 대한 이해를 더욱 높일 수 있습니다.
이 작업의 몇 가지 측면은 여전히 추가 연구가 필요합니다. 예를 들어, 지시 튜닝이나 RL 기반 방법과 달리 비지도 훈련에 주안점을 둔 초점을 맞추었습니다. 다양한 보조 지식 기반을 사용하여 다양한 기법의 조합을 연구하면 더 나은 결과를 얻을 수 있습니다. 이러한 접근 방식은 섹션 6의 가설과 결합하여 FT를 통한 지식 주입에 대한 이해를 더욱 높일 수 있습니다.