different tasks, we observe for the 10B parameter models that the 5% replay model and union-trained model exchange best performance on different tasks with notable differences being OpenBookQA in favor of the replay model and MMLU in favor of the union model. For the 405M parameter models, the 5% replay model and union-trained model exchange best performance on different tasks with no notable differences. At both model scales, the replay model improves over the model only using re-warming though differences are small and may be attributable to noise.
다른 작업의 경우, 10B parameter 모델의 경우 5% replay 모델과 union-trained 모델이 서로 다른 작업에서 최고의 성능을 발휘하는 것을 관찰할 수 있으며, 주목할 만한 차이점은 replay 모델이 OpenBookQA에서, union 모델이 MMLU에서 우세한 성능을 보입니다. 405M parameter 모델의 경우, 5% replay 모델과 union-trained 모델이 서로 다른 작업에서 최고의 성능을 교환하며 큰 차이점은 없습니다. 두 모델 규모 모두에서 replay 모델은 re-warming만 사용하는 모델보다 개선되었지만 차이가 작아 잡음에 기인할 수 있습니다.
다른 작업의 경우, 10B 파라미터 모델의 경우 5% 리플레이 모델과 유니온 학습 모델이 서로 다른 작업에서 최고의 성능을 발휘하는 것을 관찰할 수 있으며, 주목할 만한 차이점은 리플레이 모델이 OpenBookQA에서, 유니온 모델이 MMLU에서 우세한 성능을 보입니다. 405M 파라미터 모델의 경우, 5% 리플레이 모델과 유니온 학습 모델이 서로 다른 작업에서 최고의 성능을 교환하며 큰 차이점은 없습니다. 두 모델 규모 모두에서 리플레이 모델은 리워밍만 사용하는 모델보다 개선되었지만 차이가 작아 잡음에 기인할 수 있습니다.