eliminates the loss for undesired tokens without incurring additional costs during pretraining, making our approach both efficient and easily integrated.
원하지 않는 토큰에 대한 손실을 제거하면서도 사전 훈련 중 추가 비용이 발생하지 않아, 우리의 접근 방식은 효율적이고 쉽게 통합될 수 있습니다.
사전 학습 중에 추가 비용을 들이지 않고 원하지 않는 토큰에 대한 손실을 제거하여 효율적이고 쉽게 통합할 수 있습니다.