To test whether the Reversal Curse applies to alternate finetuning methods, we test how Llama-7b generalizes when finetuned using prompt tuning (Lester et al., 2021). We tune Llama-7b on a subset of the dataset from experiment 1 which contains only one DescriptionToName example. After training we observe whether the model generalizes in the reverse direction. As in our other experiments, the model does not generalize. We share details for the experiment below.
반전 저주가 대체 Fine-tuning 방법에도 적용되는지 테스트하기 위해 prompt tuning (Lester et al., 2021)을 사용하여 Fine-tuning할 때 Llama-7b가 어떻게 일반화되는지 테스트합니다. 데이터 세트의 하위 집합에서 하나의 DescriptionToName 예제만 포함된 실험 1의 데이터 세트에서 Llama-7b를 tuning합니다. 훈련 후 모델이 역방향으로 일반화되는지 관찰합니다. 다른 실험에서와 마찬가지로 모델은 일반화되지 않습니다. 실험에 대한 자세한 내용은 아래에 나와 있습니다.
반전 저주가 대체 미세 조정 방법에도 적용되는지 테스트하기 위해 프롬프트 튜닝(Lester et al., 2021)을 사용하여 미세 조정할 때 Llama-7b가 어떻게 일반화되는지 테스트합니다. 데이터 세트의 하위 집합에서 하나의 설명 이름 예제만 포함된 실험 1의 데이터 세트에서 Llama-7b를 튜닝합니다. 훈련 후 모델이 역방향으로 일반화되는지 관찰합니다. 다른 실험에서와 마찬가지로 모델은 일반화되지 않습니다. 실험에 대한 자세한 내용은 아래에 나와 있습니다.