_Remark 1.5_.: Since int8 is 8bit, LLMs can exceed 1/4 of the theoretical limit for storing knowledge; thus knowledge must be very compactly stored inside the model across all layers.
_Remark 1.5_.: int8이 8비트이기 때문에, LLM은 지식을 저장하는 이론적 한계의 1/4을 초과할 수 있습니다. 따라서 지식은 모든 레이어에 걸쳐 모델 내부에 매우 압축된 형태로 저장되어야 합니다.
_Remark 1.5_.: int8은 8비트이므로 LLM은 이론상 지식 저장 한계의 1/4을 초과할 수 있으므로 지식은 모든 레이어에 걸쳐 모델 내부에 매우 압축되어 저장되어야 합니다.