The experiments indicate that the mask ratios that different datasets can accommodate may not be entirely the same. As for mixed data, this paper has not yet explored strategies for adaptively fitting mask ratios to different datasets. Additionally, we have not yet investigated whether this approach, when applied to mixed reasoning data and general instruction tuning data, affects the general capabilities or diminishes the observed enhancement of reasoning.
실험에 따르면, 다양한 데이터 세트가 수용할 수 있는 마스크 비율이 완전히 동일하지 않을 수 있습니다. 혼합 데이터의 경우, 본 논문에서는 마스크 비율을 다양한 데이터 세트에 적응시키는 전략을 아직 탐구하지 않았습니다. 또한, 이 접근 방식을 혼합 추론 데이터와 일반 Instruction Tuning 데이터에 적용했을 때 일반적인 기능에 영향을 미치거나 관찰된 추론 향상을 감소시키는지 여부도 아직 조사하지 않았습니다.
실험에 따르면, 다양한 데이터 세트가 수용할 수 있는 마스크 비율이 완전히 동일하지 않을 수 있습니다. 혼합 데이터의 경우, 본 논문에서는 마스크 비율을 다양한 데이터 세트에 적응시키는 전략을 아직 탐구하지 않았습니다. 또한, 이 접근 방식을 혼합 추론 데이터와 일반 지침 튜닝 데이터에 적용했을 때 일반적인 기능에 영향을 미치거나 관찰된 추론 향상을 감소시키는지 여부도 아직 조사하지 않았습니다.