where \(\ell(y|x)\) is the cross entropy loss of the LM given the context \(x\) and the target \(y\).
여기서 \(\ell(y|x)\)는 문맥 \(x\)와 대상 \(y\)가 주어졌을 때 LM의 cross entropy loss입니다.
여기서 \(\ell(y|x)\)는 문맥 \(x\)와 대상 \(y\)가 주어졌을 때 LM의 교차 엔트로피 손실입니다.