2020; Power et al., 2022) or simply rely on surface pattern memorization Carlini et al. (2019); Tanzer et al. (2022). Feldman (2020); Carlini et al. (2019); Zaremba et al. (2022) develop methodologies to quantify the extent of memorization in neural models. Brown et al. (2020); Power et al. (2022); Liu et al. (2022) further explored how memorization impacts the models' generalization capabilities. Recently, a seminal work by Carlini et al. (2021); Shi et al. (2023) demonstrated the ability of language models to memorize and regurgitate training data, raising significant privacy concerns Kandpal et al. (2022); Pan et al. (2020).
2020; Power et al., 2022) 또는 단순히 표면 패턴 암기에 의존합니다 Carlini et al. (2019); Tanzer et al. (2022). Feldman (2020); Carlini et al. (2019); Zaremba et al. (2022)은 신경 모델에서 암기의 정도를 정량화하는 방법론을 개발합니다. Brown et al. (2020); Power et al. (2022); Liu et al. (2022)은 암기가 모델의 일반화 기능에 어떤 영향을 미치는지 더 탐구했습니다. 최근 Carlini et al. (2021); Shi et al. (2023)의 선구적인 연구는 Large Language Models (LLMs)이 학습 데이터를 기억하고 토해내는 능력을 보여주며 심각한 개인정보 보호 문제를 제기했습니다 Kandpal et al. (2022); Pan et al. (2020).
2020; Power et al., 2022) 또는 단순히 표면 패턴 암기에 의존합니다 Carlini et al. (2019); Tanzer et al. (2022). Feldman (2020); Carlini et al. (2019); Zaremba et al. (2022)은 신경 모델에서 암기의 정도를 정량화하는 방법론을 개발합니다. Brown et al. (2020); Power et al. (2022); Liu et al. (2022)은 암기가 모델의 일반화 기능에 어떤 영향을 미치는지 더 탐구했습니다. 최근 Carlini et al. (2021); Shi et al. (2023)의 선구적인 연구는 언어 모델이 학습 데이터를 기억하고 토해내는 능력을 보여주며 심각한 개인정보 보호 문제를 제기했습니다 Kandpal et al. (2022); Pan et al. (2020).