Figure 8: Input/output cosine similarity score of each token per layer for text ”Write a quiz about bits”. The cosine similarity scores of the 16 newly added layers(layers 28-44), as depicted in the lower figure, are observed to be nearly 1.
그림 8: 텍스트 "비트에 대한 퀴즈 작성"에 대한 각 토큰의 레이어별 입력/출력 cosine similarity 점수. 아래 그림에 표시된 것처럼 새로 추가된 16개의 레이어(레이어 28~44)의 cosine similarity 점수는 거의 1에 가깝게 관찰된다.
그림 8: 텍스트 "비트에 대한 퀴즈 작성"에 대한 각 토큰의 레이어별 입력/출력 코사인 유사도 점수. 아래 그림에 표시된 것처럼 새로 추가된 16개의 레이어(레이어 28~44)의 코사인 유사도 점수는 거의 1에 가깝게 관찰된다.