For MFT, the sample efficiency is related to the mask ratio. A small mask ratio gives the model a chance to exploit current high-confidence context tokens, while a higher mask ratio requires the model to explore the use of other distant tokens.
MFT의 경우, 샘플 효율성은 mask ratio와 관련이 있다. mask ratio가 작으면 모델이 현재 높은 신뢰도의 context tokens을 활용할 수 있는 기회를 제공하는 반면, mask ratio가 높으면 모델이 다른 먼 tokens의 사용을 탐색해야 한다.
MFT의 경우, 샘플 효율성은 마스크 비율과 관련이 있다. 마스크 비율이 작으면 모델이 현재 높은 신뢰도의 컨텍스트 토큰을 활용할 수 있는 기회를 제공하는 반면, 마스크 비율이 높으면 모델이 다른 먼 토큰의 사용을 탐색해야 한다.