We begin with a simple attack that allows an adversary to recover the size of the hidden dimension of a language model by making queries to the oracle \(\mathcal{O}\) (Algorithm 1). The techniques we use to perform this attack will be the foundation for attacks that we further develop to perform complete extraction of the final embedding projection matrix.
우리는 오라클 \(\mathcal{O}\)에 대한 쿼리를 수행하여 언어 모델의 숨겨진 차원 크기를 복구할 수 있는 간단한 공격으로 시작합니다(알고리즘 1). 이 공격을 수행하는 데 사용하는 기술은 최종 embedding projection matrix를 완전히 추출하기 위해 더 발전시킬 공격의 기초가 될 것입니다.
우리는 오라클 \mathcal{O}\)에 대한 쿼리를 수행하여 언어 모델의 숨겨진 차원 크기를 복구할 수 있는 간단한 공격으로 시작합니다(알고리즘 1). 이 공격을 수행하는 데 사용하는 기술은 최종 임베딩 투영 행렬을 완전히 추출하기 위해 더 발전시킬 공격의 기초가 될 것입니다.