The models were trained using learning rates between \(1\times 10^{-6}\) and \(5\times 10^{-5}\), which were found through a hyperparameter search. All models were trained on 4 NVIDIA A-100 GPUs for a maximum of 5 epochs and a batch size of 64.
모델은 하이퍼파라미터 검색을 통해 찾은 \(1\times 10^{-6}\)에서 \(5\times 10^{-5}\) 사이의 Learning Rate를 사용하여 학습되었습니다. 모든 모델은 최대 5회의 에포크와 64의 Batch Size로 4개의 NVIDIA A-100 GPU에서 학습되었습니다.
모델은 하이퍼파라미터 검색을 통해 찾은 \(1\배 10^{-6}\)에서 \(5\배 10^{-5}\) 사이의 학습률을 사용하여 학습되었습니다. 모든 모델은 최대 5회의 에포크와 64의 배치 크기로 4개의 NVIDIA A-100 GPU에서 학습되었습니다.