The parameterized knowledge in the model is fixed at the end of the pre-training, which leads to its shortcomings in terms of knowledge capacity and knowledge updating. While introducing external knowledge can alleviate this to some extent, it remains an imperfect solution. To fundamentally tackle this issue, continual learning Lange et al. (2022); Wang et al. (2023) stands as a promising avenue for future research endeavors.
모델의 매개변수화된 지식은 사전 학습이 끝나면 고정되어 지식 용량과 지식 업데이트 측면에서 단점이 있습니다. 외부 지식을 도입하면 어느 정도 완화할 수 있지만, 여전히 불완전한 해결책입니다. 이 문제를 근본적으로 해결하기 위해 continual learning Lange et al. (2022); Wang et al. (2023)은 향후 연구 노력을 위한 유망한 길로 자리 잡고 있습니다.
모델의 매개변수화된 지식은 사전 학습이 끝나면 고정되어 지식 용량과 지식 업데이트 측면에서 단점이 있습니다. 외부 지식을 도입하면 어느 정도 완화할 수 있지만, 여전히 불완전한 해결책입니다. 이 문제를 근본적으로 해결하기 위해 지속적인 학습 랑게(2022); 왕(2023)은 향후 연구 노력을 위한 유망한 길로 자리 잡고 있습니다.