Does the unit of reversal matter?To understand the effect of segment granularity when reversing sequences, we evaluate the performance of the following training methods on the fictitious celebrities task: standard finetuning, token and word reversal finetuning, entity-preserving reversal finetuning, and random segment reversal finetuning with varying \(k\) as described in Section 2. The results are summarized in Table 9. In general, we find that reversing at a fine-grained level such as token or word level does not significantly help to resolve the reversal curse, and only improves performance on the reverse tasks by 2-3%. Preserving entities during reversal makes it possible to predict names, but not descriptions. This indicates a close relation between the unit of reversal training and the target "concepts" (e.g. names, descriptions) of the reversal task. Similarly, the random segment reversal performs poorly at predicting descriptions when the segment length limit is set lower than the typical length of a description. The results from Section 3.1 also support this hypothesis.
역전 단위가 중요한가요? 시퀀스를 반전시킬 때 segment granularity의 효과를 이해하기 위해 가상의 유명인 과제에 대해 표준 Fine-tuning, token 및 word reversal Fine-tuning, entity-preserving reversal Fine-tuning, 2.0.1절에서 설명한 대로 다양한 \(k\)를 사용한 random segment reversal Fine-tuning 등의 훈련 방법의 성능을 평가합니다. 그 결과는 표 9에 요약되어 있습니다. 일반적으로 token이나 word 수준과 같이 세분화된 수준에서 반전하는 것은 reversal curse를 해결하는 데 큰 도움이 되지 않으며, 반전 과제에서 성능이 2~3% 향상되는 것으로 나타났습니다. 반전하는 동안 entity를 보존하면 이름을 예측할 수 있지만 설명은 예측할 수 없습니다. 이는 reversal 훈련의 단위와 반전 과제의 대상 '개념'(예: 이름, 설명) 사이의 밀접한 관계를 나타냅니다. 마찬가지로, segment 길이 제한이 설명의 일반적인 길이보다 낮게 설정되어 있을 때 random segment reversal은 설명을 예측하는 데 제대로 작동하지 않습니다. 3.1절의 결과도 이 가설을 뒷받침합니다.
역전 단위가 중요한가요?시퀀스를 반전시킬 때 세그먼트 세분성의 효과를 이해하기 위해 가상의 유명인 과제에 대해 표준 미세 조정, 토큰 및 단어 반전 미세 조정, 엔티티 보존 반전 미세 조정, 2.0.1절에서 설명한 대로 다양한 \(k\)를 사용한 무작위 세그먼트 반전 미세 조정 등의 훈련 방법의 성능을 평가합니다. 그 결과는 표 9에 요약되어 있습니다. 일반적으로 토큰이나 단어 수준과 같이 세분화된 수준에서 반전하는 것은 반전 저주를 해결하는 데 큰 도움이 되지 않으며, 반전 과제에서 성능이 2~3% 향상되는 것으로 나타났습니다. 반전하는 동안 엔티티를 보존하면 이름을 예측할 수 있지만 설명은 예측할 수 없습니다. 이는 반전 훈련의 단위와 반전 과제의 대상 '개념'(예: 이름, 설명) 사이의 밀접한 관계를 나타냅니다. 마찬가지로, 세그먼트 길이 제한이 설명의 일반적인 길이보다 낮게 설정되어 있을 때 무작위 세그먼트 반전은 설명을 예측하는 데 제대로 작동하지 않습니다. 3.1절의 결과도 이 가설을 뒷받침합니다.