We construct a simple experiment to demonstrate the amount of information LM logits may convey about the input. Given 100 text inputs from Wikipedia, we substitute a single word in the first sentence with a synonym2. Let \(\hat{x}_{s}\) be the synonym of word \(x_{s}\). To measure the change in language model output between the original sequence (containing \(x_{s}\)) and the new sequence (containing \(\hat{x_{s}}\)), we compute two quantities: the KL divergence between the probability output of \(p\) for the original and synonym-swapped sequences, and the bit-level Hamming Distance between the two distributions when represented at 16-bit precision.
LM logits이 입력에 대해 전달할 수 있는 정보의 양을 보여주기 위해 간단한 실험을 구성합니다. Wikipedia에서 100개의 텍스트 입력이 주어지면 첫 번째 문장의 단어 하나를 동의어2로 대체합니다. \(\hat{x}_{s}\)를 단어 \(x_{s}\)의 동의어라고 합니다. 원래 시퀀스( \(x_{s}\) 포함)와 새 시퀀스( \(\hat{x}_{s}\) 포함) 사이의 language model 출력의 변화를 측정하기 위해 두 가지 수량을 계산합니다: 원래 시퀀스와 동의어가 바뀐 시퀀스에 대한 \(p\)의 확률 출력 사이의 KL divergence와 16-bit 정밀도로 표현될 때 두 분포 사이의 비트 수준 Hamming Distance입니다.
LM 로짓이 입력에 대해 전달할 수 있는 정보의 양을 보여주기 위해 간단한 실험을 구성합니다. 위키피디아에서 100개의 텍스트 입력이 주어지면 첫 번째 문장의 단어 하나를 동의어2로 대체합니다. \hat{x}_{s}\)를 단어 \(x_{s}\)의 동의어라고 합니다. 원래 시퀀스(x_{s}\) 포함)와 새 시퀀스(x_{s}\) 포함) 사이의 언어 모델 출력의 변화를 측정하기 위해 두 가지 수량을 계산합니다: 원래 시퀀스와 동의어가 바뀐 시퀀스에 대한 \(p\)의 확률 출력 사이의 KL 발산과 16비트 정밀도로 표현될 때 두 분포 사이의 비트 수준 해밍 거리입니다.