1. Existing datasets do not have complete coverage of our hazard categories. Often, they have been designed to meet very similar categories (see Appendix A in the Appendix) but the definitions have important differences. Importantly, some hazard categories have few associated test items. 2. Existing datasets vary in quality and format. We wanted standardized data for the v0.5 benchmark so we can make consistent comparisons across hazard categories, models, and types of test items. 3. We saw opportunities to improve the quality of safety testing. Specifically, we want to introduce a more structured approach to how different types of interactions are tested for, drawing on linguistic and behavioral theories of digitally mediated conversation (see below). 4. In the long-term, AI Safety will have to create test items, as many of the modalities, languages and hazard categories (and subcategories) that we want to test for are not covered in any of the existing datasets. Therefore, we sought to use v0.5 as an opportunity to stress-test our processes for creating prompts.
1. 기존 데이터 세트에는 위험 범주에 대한 완전한 커버리지가 없습니다. 대부분 매우 유사한 범주(부록 A 참조)를 충족하도록 설계되었지만 정의에는 중요한 차이가 있습니다. 특히 일부 위험 범주에는 관련 테스트 항목이 거의 없습니다. 2. 기존 데이터 세트는 품질과 형식이 다양합니다. 위험 범주, 모델 및 테스트 항목 유형 간에 일관된 비교를 할 수 있도록 v0.5 benchmark를 위해 표준화된 데이터를 원했습니다. 3. 안전 테스트의 품질을 개선할 수 있는 기회를 발견했습니다. 특히, 디지털 매개 대화에 대한 언어 및 행동 이론을 바탕으로 다양한 유형의 상호 작용이 어떻게 테스트되는지에 대한 보다 체계적인 접근 방식을 도입하고자 합니다(아래 참조). 4. 장기적으로 AI Safety는 테스트하고자 하는 다양한 방식, 언어 및 위험 범주(및 하위 범주) 중 상당수가 기존 데이터 세트에 포함되어 있지 않기 때문에 테스트 항목을 만들어야 합니다. 따라서 v0.5를 prompt 생성 프로세스를 테스트할 수 있는 기회로 삼고자 했습니다.
1. 기존 데이터 세트에는 위험 범주에 대한 완전한 커버리지가 없습니다. 대부분 매우 유사한 범주(부록 A 참조)를 충족하도록 설계되었지만 정의에는 중요한 차이가 있습니다. 특히 일부 위험 범주에는 관련 테스트 항목이 거의 없습니다. 2. 기존 데이터 세트는 품질과 형식이 다양합니다. 위험 범주, 모델 및 테스트 항목 유형 간에 일관된 비교를 할 수 있도록 v0.5 벤치마크를 위해 표준화된 데이터를 원했습니다. 3. 안전 테스트의 품질을 개선할 수 있는 기회를 발견했습니다. 특히, 디지털 매개 대화에 대한 언어 및 행동 이론을 바탕으로 다양한 유형의 상호 작용이 어떻게 테스트되는지에 대한 보다 체계적인 접근 방식을 도입하고자 합니다(아래 참조). 4. 장기적으로 AI 안전은 테스트하고자 하는 다양한 방식, 언어 및 위험 범주(및 하위 범주) 중 상당수가 기존 데이터 세트에 포함되어 있지 않기 때문에 테스트 항목을 만들어야 합니다. 따라서 v0.5를 프롬프트 생성 프로세스를 테스트할 수 있는 기회로 삼고자 했습니다.