Dropout: Dropout is a widely used Method to reduce overfitting Srivastava et al. (2014). We compared with Embedding Dropout which dropout each dimension of the token embedding. For fair comparison, we only add it to the input token.
Dropout: Dropout은 과적합을 줄이기 위해 널리 사용되는 방법입니다(Srivastava et al., 2014). 토큰 임베딩의 각 차원을 Dropout하는 Embedding Dropout과 비교했습니다. 공정한 비교를 위해 입력 토큰에만 추가했습니다.
Dropout: 드롭아웃은 과적합을 줄이기 위해 널리 사용되는 방법입니다(Srivastava et al., 2014). 토큰 임베딩의 각 차원을 드롭아웃하는 임베딩 드롭아웃과 비교했습니다. 공정한 비교를 위해 입력 토큰에만 추가했습니다.