**Model inversion and membership inference.** Given an output of a model, _model inversion_ aims to construct an input that produces that output. This problem was investigated for simple regression classifiers in (Fredrikson et al., 2014, 2015) and extended to neural face-recognition classifiers in (Zhang et al., 2020). In some cases, model inversion can help recover training data. For example, in face-recognition classifiers each class corresponds to a single person, thus any image recovered by model inversion is visually similar to the training images for the same class label. (Zhang et al., 2022) used model inversion techniques to recover memorized training data from pretrained language models. A related problem is _membership inference_: given a data point, determine whether it was part of the model's training data or not (Shokri et al., 2017). Duan et al. (2023) demonstrated membership inference for in-context learning.
**Model inversion 및 membership inference**. 모델의 출력이 주어졌을 때, _model inversion_은 해당 출력을 생성하는 입력을 구성하는 것을 목표로 합니다. 이 문제는 (Fredrikson et al., 2014, 2015)에서 간단한 회귀 분류기에 대해 조사되었으며, (Zhang et al., 2020)에서 신경 얼굴 인식 분류기로 확장되었습니다. 경우에 따라 model inversion은 훈련 데이터를 복구하는 데 도움이 될 수 있습니다. 예를 들어, 얼굴 인식 분류기에서 각 클래스는 한 사람에 해당하므로 model inversion을 통해 복구된 이미지는 동일한 클래스 레이블에 대한 훈련 이미지와 시각적으로 유사합니다. (Zhang et al., 2022)는 model inversion 기술을 사용하여 사전 학습된 언어 모델에서 암기된 훈련 데이터를 복구했습니다. 관련 문제로는 _membership inference_가 있는데, 데이터 포인트가 주어졌을 때 해당 데이터 포인트가 모델의 훈련 데이터에 포함되었는지 여부를 판단하는 것입니다(Shokri et al., 2017). Duan 등(2023)은 In-Context Learning에 대한 membership inference를 입증했습니다.
**모델 반전 및 멤버십 추론**. 모델의 출력이 주어졌을 때, _모델 반전_은 해당 출력을 생성하는 입력을 구성하는 것을 목표로 합니다. 이 문제는 (Fredrikson et al., 2014, 2015)에서 간단한 회귀 분류기에 대해 조사되었으며, (Zhang et al., 2020)에서 신경 얼굴 인식 분류기로 확장되었습니다. 경우에 따라 모델 반전은 훈련 데이터를 복구하는 데 도움이 될 수 있습니다. 예를 들어, 얼굴 인식 분류기에서 각 클래스는 한 사람에 해당하므로 모델 반전을 통해 복구된 이미지는 동일한 클래스 레이블에 대한 훈련 이미지와 시각적으로 유사합니다. (Zhang et al., 2022)는 모델 반전 기술을 사용하여 사전 학습된 언어 모델에서 암기된 훈련 데이터를 복구했습니다. 관련 문제로는 _멤버십 추론_이 있는데, 데이터 포인트가 주어졌을 때 해당 데이터 포인트가 모델의 훈련 데이터에 포함되었는지 여부를 판단하는 것입니다(Shokri et al., 2017). Duan 등(2023)은 상황에 맞는 학습에 대한 멤버십 추론을 입증했습니다.