Since the main experiments are conducted in 16-bit precision, we test training in full precision (32-bit) to see if the additional bits improve performance. Training on full precision inputs gains about 1 BLEU point, indicating that we are not discarding significant information by storing probability vectors at half precision.
주요 실험이 16비트 정밀도로 수행되었기 때문에, 추가적인 비트가 성능을 향상시키는지 확인하기 위해 전체 정밀도(32비트)로 훈련을 테스트합니다. 전체 정밀도 입력으로 훈련하면 약 1 BLEU 포인트가 증가하여, 확률 벡터를 반 정밀도로 저장해도 중요한 정보를 버리지 않는다는 것을 나타냅니다.
주요 실험은 16비트 정밀도로 수행되므로 추가 비트가 성능을 향상시키는지 확인하기 위해 전체 정밀도(32비트)로 훈련을 테스트합니다. 전체 정밀도 입력으로 훈련하면 약 1 BLEU 포인트가 얻어지며, 이는 반 정밀도로 확률 벡터를 저장함으로써 중요한 정보를 폐기하지 않는다는 것을 나타냅니다.