The newly constructed datasets UpdatedLAMA, NewLAMA, and NewLAMA-Easy require multi-token decoding which adds a level of difficulty for the task compared to InvariantLAMA. Moreover, NewLAMA-Easy has a different input distribution (longer input sequences) than the other datasets since the decontextualization and back-translation processes are applied to create each instance, which makes the sentences longer. Lastly, some examples of the CKL benchmark datasets are provided in Table 6.
새로 구축된 데이터 세트 UpdatedLAMA, NewLAMA 및 NewLAMA-Easy는 multi-token decoding이 필요하므로 InvariantLAMA에 비해 작업의 난이도가 높아집니다. 또한, NewLAMA-Easy는 각 인스턴스를 생성하기 위해 decontextualization 및 back-translation 프로세스가 적용되기 때문에 다른 데이터 세트보다 입력 분포(더 긴 입력 시퀀스)가 다르며, 이로 인해 문장이 더 길어집니다. 마지막으로, 표 6에는 CKL 벤치마크 데이터 세트의 일부 예가 제공됩니다.
새로 구축된 데이터 세트 UpdatedLAMA, NewLAMA 및 NewLAMA-Easy는 다중 토큰 디코딩이 필요하므로 InvariantLAMA에 비해 작업의 난이도가 높아집니다. 또한, NewLAMA-Easy는 각 인스턴스를 생성하기 위해 컨텍스트 해제 및 역 번역 프로세스가 적용되기 때문에 다른 데이터 세트보다 입력 분포(더 긴 입력 시퀀스)가 다르며, 이로 인해 문장이 더 길어집니다. 마지막으로, 표 6에는 CKL 벤치마크 데이터 세트의 일부 예가 제공됩니다.