This is well known for LLM pre-training Kandpal et al. (2023), and we see in this case that this holds for fine-tuning as well. The rationale for this hypothesis is that mere memorization of sentences does not entail knowledge of their content, as was already shown in Berglund et al. (2023). By providing the information in numerous forms (like the data augmentation process we used), the various relationships in the data (e.g., \(a\implies b,\ b\implies c\)) stand a higher chance of appearing naturally. We believe this can potentially both increase \(\mathcal{L_{M,Q}}\) in general, as well as ameliorate Berglund et al.'s _Reversal Curse_. While promising, this result still warrants further research.
이는 LLM 사전 학습 Kandpal 등(2023)에서 잘 알려져 있으며, 이 경우에도 Fine-tuning에 적용된다는 것을 알 수 있습니다. 이 가설의 근거는 이미 Berglund 등(2023)에서 보여진 것처럼 문장을 단순히 암기하는 것만으로는 문장의 내용에 대한 지식을 갖출 수 없기 때문입니다. 데이터 증강 프로세스에서와 같이 다양한 형태로 정보를 제공함으로써 데이터의 다양한 관계(예: \(a\implies b,\ b\implies c\))가 자연스럽게 나타날 가능성이 높아집니다. 이를 통해 일반적으로 \(\mathcal{L_{M,Q}}\)를 높일 수 있을 뿐만 아니라 Berglund 등의 _반전 저주_를 개선할 수 있다고 생각합니다. 이 결과는 유망하지만 추가 연구가 필요합니다.
이는 LLM 사전 학습 Kandpal 등(2023)에서 잘 알려져 있으며, 이 경우에도 미세 조정에 적용된다는 것을 알 수 있습니다. 이 가설의 근거는 이미 Berglund 등(2023)에서 보여진 것처럼 문장을 단순히 암기하는 것만으로는 문장의 내용에 대한 지식을 갖출 수 없기 때문입니다. 데이터 증강 프로세스에서와 같이 다양한 형태로 정보를 제공함으로써 데이터의 다양한 관계(예: \(a\implies b,\ b\implies c\))가 자연스럽게 나타날 가능성이 높아집니다. 이를 통해 일반적으로 \(\mathcal{L_{M,Q}}\)를 높일 수 있을 뿐만 아니라 Berglund 등의 _반전 저주_를 개선할 수 있다고 생각합니다. 이 결과는 유망하지만 추가 연구가 필요합니다.