Safety evaluation is how we measure the extent to which models are acceptably safe for a given purpose, under specific assumptions about the context in which they are deployed [119, 120]. Evaluation is critical for identifying safety gaps in base models and understanding the effectiveness of safety features, such as adding output filters and guardrails [121, 61]; aligning models to be safer through tuning and steering [122, 68]; and reviewing and filtering training datasets [123].
안전 평가는 모델이 배포되는 컨텍스트에 대한 특정 가정 하에서 주어진 목적에 대해 허용 가능한 안전 수준을 측정하는 방법입니다[119, 120]. 평가는 기본 모델의 안전성 격차를 파악하고 출력 필터 및 가드레일 추가[121, 61]와 같은 안전 기능의 효과를 파악하는 데 매우 중요합니다. tuning 및 steering을 통해 더 안전한 모델에 맞추기[122, 68]; 학습 데이터 세트 검토 및 필터링[123].
안전 평가는 모델이 배포되는 컨텍스트에 대한 특정 가정 하에서 주어진 목적에 대해 허용 가능한 안전 수준을 측정하는 방법입니다[119, 120]. 평가는 기본 모델의 안전성 격차를 파악하고 출력 필터 및 가드레일 추가[121, 61]와 같은 안전 기능의 효과를 파악하는 데 매우 중요합니다. 조정 및 조종을 통해 더 안전한 모델에 맞추기[122, 68]; 학습 데이터 세트 검토 및 필터링[123].