We are motivated to study this problem not because we expect to be able to steal an entire production transformer model bit-for-bit, but because we hope to conclusively demonstrate that model stealing attacks are not just of academic concern but can be practically applied to the largest production models deployed today. We see a number of potential directions for improving on this attack.
우리는 전체 프로덕션 Transformer 모델을 비트 단위로 훔칠 수 있을 것으로 기대하기보다는 모델 훔치기 공격이 학문적인 관심사에만 국한되지 않고 오늘날 배포된 가장 큰 프로덕션 모델에 실제로 적용될 수 있음을 결정적으로 입증하고자 하는 동기에서 이 문제를 연구하게 되었습니다. 이 공격을 개선할 수 있는 몇 가지 잠재적인 방향을 제시합니다.
우리는 전체 프로덕션 변압기 모델을 비트 단위로 훔칠 수 있을 것으로 기대하기보다는 모델 훔치기 공격이 학문적인 관심사에만 국한되지 않고 오늘날 배포된 가장 큰 프로덕션 모델에 실제로 적용될 수 있음을 결정적으로 입증하고자 하는 동기에서 이 문제를 연구하게 되었습니다. 이 공격을 개선할 수 있는 몇 가지 잠재적인 방향을 제시합니다.