Quantization is a popular strategy for decreasing a model's memory footprint and speeding up inference. In addition to these benefits, using lower-precision number representations also effectively adds noise. As noted in Section 8.2, adding noise to the output logits could prevent our attack. A natural question that follows is, does quantization add sufficient noise to make our attack ineffective or more difficult to carry out?
양자화는 모델의 메모리 사용량을 줄이고 추론 속도를 높이는 데 널리 사용되는 전략입니다. 이러한 이점 외에도 더 낮은 정밀도의 숫자 표현을 사용하면 효과적으로 노이즈를 추가할 수 있습니다. 섹션 8.2에서 언급했듯이 출력 로짓에 노이즈를 추가하면 공격을 방지할 수 있습니다. 그렇다면 Quantization가 충분한 노이즈를 추가하여 공격을 비효율적으로 만들거나 수행하기 어렵게 만들까 하는 당연한 질문이 떠오릅니다.
양자화는 모델의 메모리 사용량을 줄이고 추론 속도를 높이는 데 널리 사용되는 전략입니다. 이러한 이점 외에도 더 낮은 정밀도의 숫자 표현을 사용하면 효과적으로 노이즈를 추가할 수 있습니다. 섹션 8.2에서 언급했듯이 출력 로짓에 노이즈를 추가하면 공격을 방지할 수 있습니다. 그렇다면 양자화가 충분한 노이즈를 추가하여 공격을 비효율적으로 만들거나 수행하기 어렵게 만들까 하는 당연한 질문이 떠오릅니다.