* Entity-preserving reversals do not impair the model's performance in forward tasks (such as determining the person's birth dates from names) as shown in Table 10. * Mixed-training (i.e., adding instruction tuning data to the pre-training level) generally performs better compared to first pre-training the model with knowledge and then fine-tuning it to answer (reversal) tasks. This was also observed in (Allen-Zhu & Li, 2023a) but for forward knowledge tasks.
* 표 10에서 볼 수 있듯이 엔티티 보존 리버설은 모델의 순방향 작업(예: 이름에서 사람의 생년월일 결정) 성능에 영향을 미치지 않습니다. * 혼합 학습(즉, 사전 학습 수준에 Instruction Tuning 데이터를 추가하는 것)은 일반적으로 지식으로 모델을 먼저 사전 학습시킨 다음 답변(반전) 작업에 맞게 Fine-tuning하는 것에 비해 더 나은 성능을 보입니다. 이는 (Allen-Zhu & Li, 2023a)에서도 관찰되었지만 순방향 지식 작업에 대해서는 그렇습니다.
* 표 10에서 볼 수 있듯이 엔티티 보존 리버설은 모델의 순방향 작업(예: 이름에서 사람의 생년월일 결정) 성능에 영향을 미치지 않습니다. * 혼합 학습(즉, 사전 학습 수준에 지침 튜닝 데이터를 추가하는 것)은 일반적으로 지식으로 모델을 먼저 사전 학습시킨 다음 답변(반전) 작업에 맞게 미세 조정하는 것에 비해 더 나은 성능을 보입니다. 이는 (Allen-Zhu & Li, 2023a)에서도 관찰되었지만 순방향 지식 작업에 대해서는 그렇습니다.