* For presenting _negative_ results (Figure 5(a) and Figure 5(c)), we select the best learning rate from three options, identical to GPT2\({}_{0}\) in Parameter 4(c). * For presenting _positive_ results (Figure 5(b) and Figure 5(d)), we use a single set of learning rates, identical to Parameter 2 but with fp16 replaced by bf16 for a stronger comparison.
* 음수_ 결과를 제시하기 위해(그림 5(a) 및 그림 5(c)), 매개변수 4(c)의 GPT2\({}_{0})와 동일한 세 가지 옵션에서 최적의 Learning Rate를 선택합니다. * 긍정적_ 결과를 제시하기 위해(그림 5(b) 및 그림 5(d)), 매개변수 2와 동일하지만 fp16이 bf16으로 대체되어 더 강력한 비교가 가능합니다.
* 음수_ 결과를 제시하기 위해(그림 5(a) 및 그림 5(c)), 매개변수 4(c)의 GPT2\({}_{0})와 동일한 세 가지 옵션에서 최적의 학습 속도를 선택합니다. * 긍정적_ 결과를 제시하기 위해(그림 5(b) 및 그림 5(d)), 매개변수 2와 동일하지만 fp16이 bf16으로 대체되어 더 강력한 비교가 가능합니다.