Thus, **even for** models at peak capacity of 2 bits/param, quantizing to int8 does not affect capacity. Given that 2 bits/param was the best capacity ratio even after 1,000 training exposures on high-quality data, we conclude that extending training _may not_ further improve the model's capacity, _but quantization can_.
따라서 최대 용량이 2 bits/param인 모델의 경우에도 int8로 Quantization해도 용량에 영향을 미치지 않습니다. 고품질 데이터에 대해 1,000회 이상 학습한 후에도 2 bits/param가 최상의 용량 비율이었으므로, 학습을 연장해도 모델의 용량이 더 이상 향상되지 않을 수 있지만 Quantization은 그렇지 않을 수 있다고 결론지었습니다.
따라서 최대 용량이 2비트/파라미터인 모델의 경우에도 int8로 양자화해도 용량에 영향을 미치지 않습니다. 고품질 데이터에 대해 1,000회 이상 학습한 후에도 2비트/파라미터가 최상의 용량 비율이었으므로, 학습을 연장해도 모델의 용량이 더 이상 향상되지 않을 수 있지만 양자화는 그렇지 않을 수 있다고 결론지었습니다.