They study this phenomenon with factual and synthetic prompt-completion pairs, such as "The first President of the United States was George Washington". These pairs are very similar to those we study in Experiments 1 and 2. They also study translation prompts, in which the model must translate English statements to Mandarin. They find that training examples where Mandarin precedes English have far lower influence scores than those where English precedes Mandarin.
그들은 "미국의 초대 대통령은 조지 워싱턴이었다"와 같은 사실적이고 종합적인 prompt-completion 쌍으로 이러한 현상을 연구합니다. 이러한 쌍은 실험 1과 2에서 연구하는 쌍과 매우 유사합니다. 또한 모델이 영어 문장을 만다린으로 번역해야 하는 번역 prompt도 연구합니다. 그들은 만다린이 영어보다 앞서는 훈련 예제의 영향력 점수가 영어보다 앞서는 훈련 예제보다 훨씬 낮다는 것을 발견했습니다.
그들은 "미국의 초대 대통령은 조지 워싱턴이었다"와 같은 사실적이고 종합적인 프롬프트 완성 쌍으로 이러한 현상을 연구합니다. 이러한 쌍은 실험 1과 2에서 연구하는 쌍과 매우 유사합니다. 또한 모델이 영어 문장을 만다린으로 번역해야 하는 번역 프롬프트도 연구합니다. 그들은 만다린이 영어보다 앞서는 훈련 예제의 영향력 점수가 영어보다 앞서는 훈련 예제보다 훨씬 낮다는 것을 발견했습니다.